Vou construir pipelines de dados escaláveis e ETL com python, sql, airflow e databricks
Engenheiro de Dados e IA
Sobre este Serviço
Precisa de pipelines de dados confiáveis que funcionem de verdade? Sou um Engenheiro de Dados com mestrado em Ciência de Dados e experiência na indústria na Amazon e Tata Consultancy Services, onde criei pipelines processando mais de 1TB de dados para mais de 100 analistas.
O que posso criar para você:
- pipelines ETL/ELT em Python e SQL
- Integração de dados de APIs, bancos de dados, CSV/Excel e armazenamento na nuvem
- Workflows agendados com Apache Airflow
- Data warehouses e modelos dbt
- Processamento com Databricks e PySpark para grandes conjuntos de dados
- Limpeza, validação e verificações de qualidade de dados
- Pipelines na AWS, GCP ou Databricks
Por que trabalhar comigo:
- Na Amazon, reduzi o tempo de processamento de pipelines em 30% e eliminei 95% do trabalho manual com automação
- Engenheiro de Dados Certificado pela Databricks
- Código limpo, documentado e testado, totalmente de sua propriedade
- Comunicação clara e entrega pontual
Como funciona:
- Me envie uma mensagem com suas fontes de dados e objetivo
- Vou confirmar o escopo e o pacote adequado
- Você recebe código funcional, documentação e uma orientação passo a passo
Não tem certeza de qual pacote é o ideal? Envie uma mensagem antes de pedir, e responderei rapidamente.
Perguntas frequentes
Tradução automática
O que você precisa de mim para começar?
Acesso ou amostras de suas fontes de dados, o destino final (banco de dados, warehouse ou arquivos) e uma breve descrição do resultado esperado. Credenciais podem ser compartilhadas de forma segura após o início do pedido.
Com quais ferramentas e plataformas você trabalha?
Python, SQL, PySpark, Apache Airflow, dbt, Kafka e Databricks, na AWS, GCP ou PostgreSQL. Se usar uma stack diferente, envie uma mensagem primeiro e confirmarei se posso ajudar.
Eu vou ter propriedade do código?
Sim. Você recebe o código fonte completo, documentação e instruções de configuração, e é 100% seu para usar e modificar.
Você pode trabalhar com meu pipeline ou banco de dados existentes?
Sim. Posso estender, corrigir ou otimizar pipelines existentes. Compartilhe detalhes antes de pedir para que eu possa definir o escopo corretamente.
Como você mantém meus dados seguros?
Uso apenas o acesso necessário para a tarefa, nunca compartilho ou armazeno seus dados além do projeto, e posso trabalhar com dados de amostra anônimos, se preferir.
E se meu projeto não se encaixar em um pacote?
Envie uma mensagem com seus requisitos e criarei uma oferta personalizada que se encaixe no seu escopo e orçamento.

