Vou construir pipelines de ETL e ELT com python, sql e dbt
Engenheiro de Dados para pipelines ETL e ELT, SQL, Python, dbt, Databricks
Sobre este Serviço
Precisa de pipelines de dados confiáveis que transformem dados brutos em tabelas limpas, prontas para análise? Sou engenheiro de dados (Top Rated no Upwork, 100% de sucesso em jobs, mais de 1.000 horas) e eu gero pipelines ETL/ELT que são testados, documentados e fáceis de manter.
O QUE VOCÊ VAI RECEBER
- pipelines ETL/ELT em Python e SQL a partir de APIs, bancos de dados, arquivos e armazenamento na nuvem
- modelagem de data warehouse com dbt (camadas de staging, intermediária e mart)
- orquestração com Apache Airflow, containerizado com Docker
- pipelines Lakehouse no Databricks, PySpark e Delta Lake
- otimização de consultas SQL e checagens de qualidade de dados
- documentação clara e uma call de entrega
MEU PROCESSO
- conversa rápida de descoberta sobre suas fontes, volumes e objetivos
- concordar o design da pipeline
- construir, testar e validar com seus dados
- entregar código, docs e uma demonstração
Não sabe qual pacote combina? Me mande uma mensagem antes de fechar o pedido que eu recomendo o escopo certo.
Meu portfólio
Perguntas frequentes
Tradução automática
Com quais ferramentas e plataformas você trabalha?
Python, SQL, dbt, Apache Airflow, PySpark e Databricks, com Postgres e outros bancos relacionais. Também integro APIs, arquivos planos e armazenamento na nuvem. Diga qual é sua stack e eu trabalho com ela.
O que recebo na entrega?
Código-fonte bem comentado, um README curto com passos de configuração e execução, e uma demonstração de como a pipeline funciona. Versões Standard e Premium incluem também uma auditoria inicial de dados e recomendações de design.
