Ver categorias
Explorar
Fiverr Pro
Português
$
USD
Serei seu engenheiro de dados do databricks para ETL com pyspark e Unity catalog
Especialista certificado em Databricks Multicloud nas soluções AWS, GCP, Azure
Olá! Sou Arjun — engenheiro certificado em Databricks e multi-nuvem, com mais de 8 anos de experiência em Azure, AWS e GCP. Ajudo equipes a transformar dados brutos em insights em tempo real usando fe...
Sobre este Serviço
Engenheiro de Dados certificado em Databricks e Spark com mais de 8 anos de experiência entregando soluções de dados de alto desempenho, nativas da nuvem, em Azure, AWS e GCP. Especializo-me em construir pipelines de ETL seguros, escaláveis e otimizados para custo usando Databricks, Apache Spark, Unity Catalog e Workflows para transformar dados complexos em insights confiáveis para o negócio.
Serviços que ofereço:
- Configuração e setup do workspace do Databricks
- Design do Unity Catalog e controle de acesso seguro
- Desenvolvimento de ETL/ELT com PySpark e Delta Lake
- Delta Live Tables (DLT) e pipelines Auto Loader
- Integração com APIs, armazenamento na nuvem e bancos de dados
- Otimização de desempenho, testes
Histórias de sucesso:
- Processou mais de 10 milhões de registros por dia com pipelines em tempo real
- Reduziu custos de ETL em 90% para um cliente do setor financeiro
- Diminuíu o tempo de processamento de 6 horas para 20 minutos
- Configurou o Unity Catalog para acesso seguro de múltiplas equipes
O que você vai receber:
- Código de ETL limpo e pronto para produção
- Configuração segura do Unity Catalog
- Documentação clara e diagramas de arquitetura
- Otimização de custos e desempenho
Por que me escolher:
- Mais de 8 anos de experiência prática em engenharia de dados
- Especialista certificado em Databricks
- Construído para AWS, Azure e GCP
- Entrega rápida, clara e confiável
️Sinta-se à vontade para entrar em contato antes de fazer seu pedido.
Meu portfólio
Outros serviços de Engenharia de Dados que eu ofereço
Perguntas frequentes
Tradução automática
Como você lida com dados em grande escala?
Eu projeto pipelines usando ferramentas escaláveis como Apache Spark, Delta Lake e Databricks Workflows, garantindo processamento eficiente de milhões de registros diários. Também otimizo particionamento, cache e alocação de recursos para desempenho e economia de custos.
Seus soluções podem escalar conforme meus dados crescem?
Sim — meus pipelines de ETL são construídos para escalar de forma contínua à medida que seu volume de dados aumenta. Seja com dados em lote ou streaming, garanto que a arquitetura suporte escalabilidade horizontal e desempenho sob cargas pesadas.
Você consegue construir e otimizar workflows existentes do Databricks?
Com certeza. Posso refatorar, depurar e escalar seus notebooks ou workflows atuais.
Quais tecnologias você usa?
PySpark, SQL, Delta Lake, Auto Loader, Unity Catalog, DLT, Airflow e mais.
