Vou construir e otimizar pipelines escaláveis de databricks delta lake

Engenheiro de Dados Sênior Certificado pela Microsoft & Databricks (Mais de 9 anos de experiência)

Pare de lutar com dados bagunçados. Construa um Lakehouse de nível empresarial que escala. Como um especialista com dupla certificação, eu projeto e otimizo plataformas de dados prontas para produção em AWS, Azure e Databricks.

O que eu entrego:

• Arquitetura Medallion: Implementação completa das camadas Bronze, Silver e Gold para integridade dos dados.
• Pipelines escaláveis: ETL/ELT em lote e streaming de alto desempenho usando PySpark e Spark SQL.
• Ecossistema Databricks: Domínio do Unity Catalog (Governança), Delta Live Tables (DLT) e Asset Bundles (DABs).
• Integração com a nuvem: Configuração especializada para AWS (S3, Glue, EMR, Athena) e Azure (Fabric, ADF, Synapse, OneLake).
• Otimização de custos: Ajustes avançados (Z-Order, Liquid Clustering) para reduzir seus gastos com computação na nuvem.
• Dados prontos para IA: Preparação de dados especializada para GenAI, chatbots RAG e Mosaic AI.

Por que trabalhar comigo?

• Mais de 9 anos de experiência: Ampla vivência com ambientes de dados complexos e de escala empresarial.
• De nível produção: Código limpo, bem documentado e altamente fácil de manter.
• Foco em desempenho: Sistemas otimizados para consultas em menos de um segundo e máxima eficiência.
• Transforme seus dados brutos em um ativo estratégico. Entre em contato comigo hoje