Vou construir uma pipeline de ETL automatizada com airflow e postgresql

Algumas informações foram traduzidas automaticamente.

Ucrânia

Eu falo Inglês

Engenheiro de dados

Sou um Engenheiro de Dados Júnior com habilidades comprovadas em construir pipelines de dados em lote robustos de ponta a ponta. Minha expertise inclui ingestão de dados de várias fontes externas, orq...
Sobre este Serviço

Pare de copiar dados manualmente entre fontes. Eu crio pipelines de ETL automatizadas que buscam dados de APIs ou sites, limpam e validam, e carregam no seu banco de dados sem trabalho manual após a configuração.


O que você recebe:

- Dados buscados da sua(s) fonte(s) via API ou site

- Limpeza e validação antes de qualquer coisa tocar seu banco de dados

- Armazenamento no PostgreSQL (ou seu banco de dados SQL preferido)

- Opcional: execuções agendadas com Apache Airflow (diárias/semanal/personalizadas)

- Opcional: rastreamento completo do histórico, não apenas o snapshot mais recente

- Opcional: alertas automáticos (Telegram/email) quando novos dados chegam


Recentemente, construí uma pipeline de estilo produção usando exatamente essa stack: Airflow, PostgreSQL, Docker, puxando dados de múltiplas fontes, normalizando em um esquema limpo e rastreando o histórico de cada registro. Compartilharei o repositório no GitHub para você revisar a qualidade do código antes de fazer seu pedido.


Cada pipeline é feita sob medida para sua fonte de dados e banco de dados, não uma template genérica com seu nome colado.


Envie uma mensagem com sua fonte de dados e banco de dados de destino antes de pedir, assim posso confirmar o escopo e o prazo.

Especialidade:

Integração via API

Automações

Aquisição de dados

Tecnologia:

Python

SQL

Apache Airflow

Meu portfólio