eu vou construir ou corrigir seus pipelines de dados do azure databricks e pyspark

Algumas informações foram traduzidas automaticamente.

Índia

Eu falo Hindi, Inglês, Panjabi, Francês

Engenheiro de Dados Azure Databricks e PySpark

Engenheiro de Dados Azure com ~4 anos construindo pipelines de lakehouse em produção no Azure Databricks, PySpark, Azure Data Factory, Delta Lake e Unity Catalog, principalmente para uma grande plataf...
Sobre este Serviço

Precisa de um pipeline confiável no Azure Databricks, ou de um que esteja falhando com frequência? Sou engenheiro de dados de Azure, com cerca de 4 anos construindo pipelines de lakehouse em produção no Databricks, PySpark, Azure Data Factory, Delta Lake e Unity Catalog.


O que eu faço:

  • Novos pipelines: ingerir arquivos, APIs ou bancos de dados para o Delta Lake (bronze, silver, gold)
  • Consertar notebooks, jobs e pipelines ADF que estão falhando
  • Cargas incrementais, merges e upserts (SCD), evolução de schema
  • Checagens de qualidade de dados, logging e alertas
  • Documentação clara para sua equipe conseguir rodar

Como trabalhamos: compartilhe seu notebook ou código e dados de amostra (dados fictícios basta), ou me dê acesso ao workspace com menor privilégio através do seu admin. Por favor, nunca envie senhas ou chaves.


Eu uso ferramentas com apoio de IA, e cada entrega é testada e documentada por mim.


Por favor, me mande uma mensagem antes de encomendar para eu confirmar o escopo e o prazo.

Destination Platform:

Azure Synapse Analytics

Ferramentas e plataformas:

Fábrica de dados do Azure