Eu vou construir pipelines de dados ETL com databricks e azure

Algumas informações foram traduzidas automaticamente.

Itália

Eu falo Italiano, Inglês

17 pedidos finalizados

Engenheiro de Big Data, IA e Machine Learning

Mattia G. ~🇮🇹 Cosenza👨🏻‍💻 •Mestre em engenharia de software, IA & ML, Unical •Graduação em engenharia de software, Unical •Estou disponível após as 18h de segunda a sexta-feira, e estou dispo...
Sobre este Serviço

Procurando um Engenheiro de Dados confiável para criar um pipeline ETL robusto para seu negócio?

Sou um Engenheiro de Big Data que trabalha diariamente com pipelines de dados em escala empresarial na Azure, não apenas scripts que rodam uma vez e quebram na próxima mudança de esquema.

O que eu ofereço:

  • Pipelines ETL personalizados (extração, transformação, carregamento)
  • Integração de dados de múltiplas fontes (bancos de dados, APIs, arquivos, armazenamento na nuvem)
  • Limpeza, formatação e validação de dados
  • Orquestração no Databricks e Azure Data Factory
  • Pipelines escaláveis construídos com PySpark para grandes volumes de dados
  • Código fonte limpo e documentado

Minha experiência em Engenharia de Dados e Big Data (PySpark, Databricks, Azure Data Factory, Snowflake) significa que seu pipeline não é apenas funcional, mas foi criado para lidar com volumes crescentes de dados e rodar de forma confiável em produção, não apenas em um notebook isolado.

Seja você precisa de um pipeline simples de uma única fonte ou de um fluxo de dados empresarial pronto para produção, vou ajustar o pacote às suas necessidades reais de dados e objetivos.

Me envie uma mensagem antes de fazer o pedido com suas fontes de dados, volume e destino. Assim, posso recomendar o melhor pacote ou uma estimativa personalizada.

Especialidade:

Big data

Extração de dados

Fluxo de dados

etl

Tecnologia:

apache spark

Fábrica de dados do Azure

Python

SQL