Eu vou construir pipelines de ETL confiáveis com Airflow em Python

Algumas informações foram traduzidas automaticamente.

Vietnã

Eu falo Vietnamita, Inglês

Engenheiro de Dados para Airflow, Python e PostgreSQL

Engenheiro de Dados que monta pipelines de dados confiáveis e automatizados e data warehouses com Apache Airflow, Python e PostgreSQL. Projetou modelos de dados limpos, agendas com cargas diárias com ...
Sobre este Serviço

Cansado de scripts quebrados, importações manuais de CSV ou código gerado por IA que ninguém consegue explicar? Sou um Engenheiro de Dados atuante que constrói pipelines de dados em produção todos os dias para uma grande empresa de varejo.


Eu vou criar pipelines Apache Airflow em Python que extraem, limpam e carregam seus dados no PostgreSQL ou no Microsoft SQL Server, rodando automaticamente conforme o agendamento.


O QUE VOCÊ RECEBE

- DAGs do Airflow com estrutura clara, tentativas de reexecução e alertas de falha

- Código Python limpo e testado

- Checagens de qualidade de dados para que dados ruins não cheguem aos seus relatórios

- Código entregue no seu repositório Git (GitHub ou Bitbucket) com um README

- Um walkthrough em vídeo mostrando como tudo funciona

- Correções de bugs gratuitas por 7 dias após a entrega


BOA ADEQUAÇÃO PARA

- Dados de e-commerce e varejo (pedidos, estoque, vendas)

- Carregar dados CSV, Excel ou API para um banco de dados conforme o cronograma

- Movimentar dados entre PostgreSQL e SQL Server

- Corrigir DAGs do Airflow que continuam falhando


NÃO INCLUÍDO

- Streaming em tempo real (Kafka, etc.)


Por favor, me mande mensagem ANTES de fazer o pedido com suas fontes de dados e banco de dados de destino, para eu confirmar o escopo e o cronograma.

Destination Platform:

ClickHouse

•

PostgreSQL

•

mySQL

Ferramentas e plataformas:

Fivetran

•

Airbyte

•

Kafka Connect

Meu portfólio