Vou construir pipelines de dados expert em pyspark com databricks e delta lake
Vou fornecer análises de dados, Python e serviços de nuvem
Sobre este Serviço
Pipelines de Dados Escaláveis com PySpark, Databricks & Delta Lake
Cansado de pipelines de dados lentos, não otimizados ou pouco confiáveis? Como um Engenheiro de Dados profissional com mais de 3,5 anos de experiência, especializo-me em arquitetar soluções ETL/ELT de alto desempenho. Ajudo empresas a transformar dados fragmentados em conjuntos de dados limpos e prontos para produção usando a arquitetura moderna Lakehouse.
Minha Expertise Técnica:
- PySpark & Databricks: Desenvolvimento de lógica de processamento distribuído complexa para big data.
- Delta Lake: Implementação de transações ACID, aplicação de esquema e viagem no tempo para armazenamento confiável.
- Orquestração de Workflow: Automação especializada usando Azure Data Factory (ADF), Apache Airflow e Azure Functions sem servidor.
- Infraestrutura em Nuvem: Experiência prática com Azure, MinIO e otimização de SQL de alto desempenho.
Por que trabalhar comigo?
Foco na estabilidade arquitetônica e na eficiência de computação. Meu background em integrações complexas de ERP e pesquisa em engenharia de dados garante que seus pipelines sejam construídos para escalabilidade a longo prazo, não apenas uma solução rápida.
Por favor, envie uma mensagem antes de fazer seu pedido. Cada projeto de dados tem requisitos únicos, e um alinhamento técnico breve é essencial para fornecer a solução mais precisa.
