Ver categorias
Explorar
Fiverr Pro
Português
$
USD
Eu vou construir um pipeline de ETL personalizado usando python e apache airflow
Engenheiro de dados, pipelines ETL, Spark e especialista em data warehouse na nuvem
Engenheiro de Dados | Mais de 4 anos construindo pipelines ETL, data warehouses e sistemas de streaming em tempo real. Especialista em Python, Apache Airflow, Apache Spark, dbt, Snowflake, BigQuery, A...
Sobre este Serviço
Você está enfrentando dificuldades com transferências manuais de dados, scripts quebrados ou pipelines de dados pouco confiáveis? Eu vou criar um pipeline de ETL pronto para produção que extrai, transforma e carrega seus dados automaticamente, economizando horas de trabalho manual toda semana.
O que eu entrego:
- Pipeline de ETL personalizado desenvolvido em Python com código limpo e documentado
- DAG do Apache Airflow para agendamento e monitoramento automáticos
- Suporte para todas as principais fontes de dados: bancos de dados (PostgreSQL, MySQL), APIs, CSV/Excel, S3, Google Sheets
- Lógica de transformação e limpeza de dados adaptada às suas regras de negócio
- Tratamento de erros, lógica de retry e alertas por email/Slack em caso de falhas
- Implantação na sua infraestrutura de nuvem (AWS, GCP, Azure) ou servidor local
- Documentação completa para que sua equipe possa manter o pipeline de forma independente
Tecnologias que uso: Python, Apache Airflow, Apache Spark, Pandas, SQLAlchemy, AWS Glue, AWS Lambda, S3, PostgreSQL, MySQL, BigQuery, Snowflake.
Para quem é indicado:
- Startups criando seu primeiro pipeline de dados automatizado
- Empresas migrando de workflows manuais em Excel/CSV para ETL automatizado
- Equipes substituindo um pipeline legado quebrado ou lento
- Empresas que precisam de um pipeline de ingestão de dados para Snowflake ou BigQuery
Meu portfólio
Outros serviços de Engenharia de Dados que eu ofereço
Perguntas frequentes
Tradução automática
Quais fontes de dados você consegue conectar?
Quais fontes de dados você consegue conectar? Posso conectar a qualquer banco de dados SQL (PostgreSQL, MySQL, MSSQL), APIs REST, arquivos CSV/JSON/Excel, armazenamento na nuvem (S3, GCS), Google Sheets e ferramentas SaaS como Salesforce ou HubSpot via conectores.
Preciso de uma conta na nuvem?
Para implantação na nuvem, vou precisar de acesso à sua conta AWS/GCP/Azure. Para implantações locais, só preciso de acesso SSH ao servidor. Também posso entregar uma solução baseada em Docker que você roda em qualquer lugar.
Vou conseguir manter o pipeline sozinho?
Sim. Todo pipeline que entrego vem com documentação completa, comentários no código e um vídeo explicativo para que sua equipe possa manter e expandir sem minha ajuda.
E se eu precisar de alterações após a entrega?
Os pacotes Padrão e Premium incluem revisões. Também ofereço um pacote de manutenção pago se você quiser suporte contínuo.
Quanto tempo leva um pipeline de ETL típico?
Quanto tempo leva um pipeline de ETL típico? Um pipeline simples de uma única fonte leva de 2 a 3 dias. Um pipeline com múltiplas fontes e agendamento no Airflow leva de 4 a 6 dias. Sempre confirmo o prazo antes de você fazer o pedido.
