Vou construir uma pipeline de ETL automatizada com airflow e postgresql
Engenheiro de dados
Sobre este Serviço
Pare de copiar dados manualmente entre fontes. Eu crio pipelines de ETL automatizadas que buscam dados de APIs ou sites, limpam e validam, e carregam no seu banco de dados sem trabalho manual após a configuração.
O que você recebe:
- Dados buscados da sua(s) fonte(s) via API ou site
- Limpeza e validação antes de qualquer coisa tocar seu banco de dados
- Armazenamento no PostgreSQL (ou seu banco de dados SQL preferido)
- Opcional: execuções agendadas com Apache Airflow (diárias/semanal/personalizadas)
- Opcional: rastreamento completo do histórico, não apenas o snapshot mais recente
- Opcional: alertas automáticos (Telegram/email) quando novos dados chegam
Recentemente, construí uma pipeline de estilo produção usando exatamente essa stack: Airflow, PostgreSQL, Docker, puxando dados de múltiplas fontes, normalizando em um esquema limpo e rastreando o histórico de cada registro. Compartilharei o repositório no GitHub para você revisar a qualidade do código antes de fazer seu pedido.
Cada pipeline é feita sob medida para sua fonte de dados e banco de dados, não uma template genérica com seu nome colado.
Envie uma mensagem com sua fonte de dados e banco de dados de destino antes de pedir, assim posso confirmar o escopo e o prazo.
Tecnologia:
Python
•
SQL
•
Apache Airflow

