Vou desenvolver pipeline ETL, ELT usando azure databricks e pyspark

Está tendo dificuldades com pipelines de dados, processos ETL, consultas SQL, transformações PySpark ou Databricks? Posso te ajudar a projetar, solucionar problemas, otimizar e melhorar suas soluções de engenharia de dados.

Sou um Engenheiro de Dados com mais de 3,5 anos de experiência trabalhando com Python, SQL, PySpark, Databricks, Azure, Delta Lake e pipelines ETL/ELT.

Meus serviços incluem:

• Design e otimização de pipelines ETL/ELT
• Desenvolvimento, depuração e otimização de consultas SQL
• Transformação de dados com PySpark e ajuste de desempenho
• Soluções Azure Databricks e ADLS
• Limpeza, validação e verificações de qualidade de dados
• Arquitetura Medallion e Delta Lake
• Arquitetura de pipelines de dados e documentação
• Solução de problemas em workflows existentes de engenharia de dados

Foco em entender suas necessidades, oferecer soluções práticas e escaláveis, escrever código limpo e fácil de manter, e garantir resultados confiáveis.

Seja para ajudar com uma tarefa pequena de dados ou orientar sobre um pipeline completo, fique à vontade para me contatar. Vamos discutir suas necessidades!