Eu vou construir pipelines ETL automatizadas usando apache airflow que consolidam dados
cientista de dados
Sobre este Serviço
Eu construo pipelines ETL (Extract, Transform, Load) de nível de produção usando Apache Airflow para automatizar seu fluxo de dados e consolidar informações de várias fontes em seu armazém na nuvem.
O QUE VOCÊ RECEBE
Configuração e Setup do Apache Airflow
- DAGs do Airflow prontos para produção
- Agendamento de tarefas e automação
- Tratamento de erros e lógica de retry
Integração de Fontes de Dados
- Conexão com qualquer API ou banco de dados
- Suporte: Shopify, Stripe, HubSpot, Google Analytics, etc.
- Conectores personalizados conforme necessário
Transformações de Dados
- Limpeza e validação de dados brutos
- Modelagem de dados com dbt
- Implementação de lógica de negócio
Configuração do Armazém na Nuvem
- BigQuery, Snowflake ou Redshift
- Esquemas otimizados
- Estratégias de partição
Qualidade e Validação de Dados
- Checagens automatizadas de qualidade
- Detecção de anomalias
- Alertas via Slack/Email
Documentação e Suporte
- Diagramas de arquitetura
- Instruções de setup
- Assistência pós-entrega
Ferramentas e plataformas:
Outros

