Ver categorias
Explorar
Fiverr Pro
Português
$
USD
Vou construir uma pipeline ETL em python para seus dados
Engenheiro de Dados e Desenvolvedor Python
Engenheiro de Dados construindo pipelines automatizados e de nível de produção, desde a ingestão até armazéns prontos para análise.
Construí: um pipeline de mais de 1 bilhão de linhas (Airflow, S3, S...
Sobre este Serviço
Tem scripts que funcionam, mas rodam manualmente ou sem agendamento adequado?
Vou envolver seu fluxo de dados existente em uma orquestração de nível de produção.
O que você recebe:
- DAGs do Apache Airflow para agendar e monitorar seus scripts existentes
- Tratamento de erros adequado e lógica de retry
- Opcional: modelos dbt para substituir transformações SQL ad-hoc por modelos testados e versionados
- Opcional: testes de qualidade de dados e verificações de atualização da fonte
Este é o mesmo padrão de orquestração que usei para rodar um pipeline de mais de 1 bilhão de linhas de forma confiável, adaptado para encaixar na sua base de código existente, sem precisar reconstruir do zero.
Compartilhe a estrutura atual dos seus scripts/repos na solicitação para que eu possa fazer uma cotação precisa antes de começar.
Meu portfólio
Perguntas frequentes
Tradução automática
Preciso reescrever meus scripts?
Não — trabalho com o que você já tem e envolvo na orquestração, com mudanças mínimas na sua lógica atual.
Você precisa dos meus scripts antes de eu fazer o pedido?
Não é obrigatório, mas compartilhá-los (ou uma descrição da sua configuração) ajuda a fazer uma cotação precisa e evita surpresas.
Você consegue migrar de cron jobs para Airflow?
Sim, essa é uma solicitação comum e se encaixa bem aqui.
