Vou criar pipelines de dados escaláveis usando azure data factory e databricks

Sou especialista em projetar e desenvolver pipelines ETL/ELT de ponta a ponta usando Azure Data Factory (ADF) e Databricks (PySpark). Integro dados de múltiplas fontes — APIs, bancos de dados SQL, armazenamento na nuvem, arquivos e mais — em pipelines limpos, estruturados e prontos para produção.

Com forte expertise em orquestração ADF, pipelines Delta do Databricks e transformações PySpark, posso ajudar você a construir fluxos de trabalho robustos, fáceis de manter e otimizados para desempenho. Seja uma pipeline simples de ingestão ou uma solução completa de múltiplas fontes, entrego resultados escaláveis, seguros e bem documentados.

O que ofereço:

Ingestão de dados de várias fontes

Pipelines, triggers e orquestração no ADF

Pipelines ETL/ELT Delta do Databricks

Transformações PySpark

Verificações de qualidade e validação de dados

Pipelines de streaming ou batch

Documentação e melhores práticas

Vamos construir uma pipeline que entregue dados precisos, confiáveis e de nível de produção para o seu negócio!