Farei engenharia de dados, pipelines ETL e projetos databricks

Algumas informações foram traduzidas automaticamente.

Paquistão

Eu falo Inglês

Engenheiro de dados

Sou um Engenheiro de Dados, focado em construir sistemas de dados escaláveis e nativos da nuvem que transformam dados brutos em insights significativos. Especializo-me em projetar e otimizar pipelines...
Sobre este Serviço

Engenheiro de Dados | Databricks · Delta Lake · Spark | Azure · AWS · GCP | Arquitetura Medallion | Pipelines GenAI


Está tendo dificuldades com pipelines de dados lentos, bagunçados ou pouco confiáveis? Eu crio soluções de engenharia de dados prontas para produção usando a stack moderna de dados Databricks, Apache Spark, Delta Lake e Arquitetura Medallion na Azure, AWS e GCP.



  • Design e desenvolvimento de pipelines ETL/ELT
  • Arquitetura Medallion (Bronze, Silver, Gold)
  • Otimização Delta Lake (Z-ordering, vacuuming, viagem no tempo)
  • Workflows do Databricks, Unity Catalog, Auto Loader
  • Pipelines de streaming (Kafka, Event Hub, Kinesis)
  • Modelos dbt e verificações de qualidade de dados
  • Configuração na nuvem: Azure Data Factory, AWS Glue, GCP Dataflow
  • Pipelines de dados GenAI e integrações LLM


Código limpo, documentação e entrega no prazo garantidos. Vamos conversar?

Warehouse Platform:

BigQuery

Databricks

PostgreSQL / Greenplum

Tipo de projeto:

Migração