Vou construir e otimizar seus pipelines de ETL e fluxos de trabalho de integração de dados

Algumas informações foram traduzidas automaticamente.

Paquistão

Eu falo Urdu, Inglês, Alemão

4 pedidos finalizados

Seu lugar único para soluções de dados

Sou um engenheiro de dados sênior com mais de 6 anos construindo soluções de dados de ponta a ponta em startups e scale-ups (incluindo Delivery Hero, Berlim). Trabalho com: pipelines ETL, infraestrutu...
Sobre este Serviço

Pipelines ruins não só te atrasam, como também quebram a confiança nos seus dados. Sou um engenheiro de dados sênior com mais de 6 anos construindo pipelines de ETL em produção e fluxos de trabalho de integração de dados em startups e scale-ups, incluindo Delivery Hero (Berlim).

Vou projetar e construir seu pipeline do começo ao fim, desde a ingestão até o destino, de forma limpa, confiável e fácil de manter pela sua equipe.

O que entrego:

  • Design e implementação de pipelines de ETL
  • Ingestão de dados de múltiplas fontes (APIs, bancos de dados, arquivos planos)
  • Lógica de transformação e validação de dados
  • Orquestração de workflows (Airflow, Kestra)
  • Configurações nativas na nuvem (AWS: Athena, Redshift, S3 · GCP: BigQuery, Dataflow)
  • Tratamento de erros, logs e monitoramento básico
  • Documentação de entrega

Antes de começar, vou definir claramente o escopo do trabalho para evitar surpresas quanto ao prazo ou entregas. Para projetos maiores ou contínuos, ofertas personalizadas estão disponíveis.

Ferramentas: Python, SQL, Apache Airflow, Kestra, AWS (Athena, Redshift, S3), GCP (BigQuery, Dataflow), PostgreSQL, dbt

Idioma:

Inglês

Experiência técnica:

apache spark

hadoop

Snowflake

Especialidade:

Pipelines de dados

Desenvolvimento de ETL

Setor:

Data analytics

Serviços financeiros

Jurídico