Vou construir um pipeline de dados no azure usando data factory, python, sql ou databricks

Precisa de ajuda para construir ou corrigir seu pipeline de dados no Azure?

Sou um Engenheiro de Dados com mais de 6 anos de experiência profissional trabalhando com Azure, Databricks, Python, PySpark e SQL. Posso ajudar você a criar fluxos de trabalho ETL/ELT confiáveis e resolver problemas existentes no pipeline de dados.

O que posso ajudar:

• pipelines do Azure Data Factory (ADF)
• fluxos de trabalho de dados ETL/ELT
• injeção de dados de arquivos, bancos de dados e APIs
• transformação de dados usando SQL, Python ou PySpark
• fluxos de trabalho do Azure Databricks
• pipelines parametrizados e agendados
• carregamento incremental de dados
• validação de dados e verificações de qualidade
• depuração e resolução de problemas no pipeline
• tratamento básico de erros e monitoramento
• documentação e entrega

Se você precisa de um pipeline novo, consertar um existente ou automatizar um processo de dados repetitivo, vou fornecer uma solução prática e bem testada.

Por favor, envie uma mensagem antes de fazer o pedido para requisitos complexos, assim posso entender seu caso de uso e recomendar o pacote adequado.