Vou construir e otimizar seus pipelines databricks pyspark na azure
Databricks :: Azure :: Synapse :: PySpark :: Power BI :: SQL :: SSRS
Nível 1
Atendeu a determinados critérios de desempenho e demonstra forte potencial no marketplace.
Sobre este Serviço
Jobs lentos no Databricks, custos crescentes de cluster ou uma pipeline que continua falhando? Eu resolvo isso.
Sou um Engenheiro de Dados Sênior com mais de 8 anos de experiência e certificado como Data Engineer Associate no Databricks. Construo e ajusto pipelines de produção no Azure Databricks para clientes de varejo, finanças, saúde, e-commerce e viagens.
O que eu entrego:
- Jobs de ETL com PySpark e Spark SQL no Azure Databricks
- Tabelas Delta Lake com layout bronze, prata e ouro
- Orquestração e agendamento com Azure Data Factory
- Otimização de performance: particionamento, joins, caching, dimensionamento de cluster
- Verificações de qualidade de dados, testes unitários e documentação clara
- Ingestão de SQL Server, APIs REST, arquivos e Dynamics 365
Como funciona:
- Você compartilha a fonte, o destino e o problema atual.
- Eu confirmo o escopo e o prazo.
- Você recebe o código testado, um guia de execução e uma apresentação.
Suporte também para AWS Databricks. Escopo maior? Envie uma mensagem para uma proposta personalizada.
Warehouse Platform:
Azure Synapse
•
Fabric Warehouse
•
Databricks
Tipo de projeto:
Otimização
Meu portfólio
Outros serviços de Engenharia de Dados que eu ofereço
Perguntas frequentes
Tradução automática
Você tem alguma tarefa relacionada a Data Engineering e não conhece a solução possível?
Posso discutir a solução de acordo com sua necessidade no Zoom, MS Teams ou qualquer outra plataforma. Por favor, me envie uma mensagem, será um prazer atendê-lo.
Você precisa de acesso ao nosso Databricks ou ambiente na nuvem?
Para a maioria dos trabalhos, leitura ou um espaço de trabalho sandbox já basta. Se for necessário acesso de escrita, vou pedir credenciais temporárias e limitadas só pelo tempo do projeto.
Você consegue otimizar jobs existentes de PySpark para reduzir custos e aumentar a velocidade?
Consigo sim. Revisito particionamento, tamanho do cluster e lógica do job para diminuir o tempo de execução e os custos de computação, e entrego um relatório rápido com as mudanças feitas.
Você trabalha tanto na AWS quanto na Azure?
Sim. Azure é minha plataforma principal, e também entrego trabalhos com Databricks e PySpark na AWS.
E se meu projeto for maior que os pacotes?
Me envie uma mensagem com as fontes, o destino e o prazo, e eu responderei com uma proposta personalizada para o seu projeto.
40 avaliações deste Serviço
| (40) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
N nexxta23

Estados Unidos
Second time working with Atta. Very knowledgeable. Definitely will work with him again and recommend him.
US$ 50
Preço
1 dia
Tempo
Útil?M 
millenborgeld

Alemanha
It was great!
US$ 50
Preço
1 dia
Tempo
A 
Resposta do freelancer
Útil?M missbrebre1

Estados Unidos
Atta is extremely talented with writing TSQL queries on the fly. It’s always a pleasure working with him and I always learn multiple new things from him every single time.
US$ 50-US$ 100
Preço
1 dia
Tempo
Útil?I 
iankas

Suíça
was very good. Rockstar in his field. Will definetly order again!
US$ 400-US$ 600
Preço
1 dia
Tempo
A 
Resposta do freelancer
Útil?C craigread

Reino Unido
thanks for the help, knowledgeable, professional, quick, very good communicator, a pleasure to work with
US$ 200-US$ 400
Preço
1 dia
Tempo
A 
Resposta do freelancer
Útil?
40 avaliações deste Serviço
| (40) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
N nexxta23

Estados Unidos
Second time working with Atta. Very knowledgeable. Definitely will work with him again and recommend him.
US$ 50
Preço
1 dia
Tempo
Útil?M 
millenborgeld

Alemanha
It was great!
US$ 50
Preço
1 dia
Tempo
A 
Resposta do freelancer
Útil?M missbrebre1

Estados Unidos
Atta is extremely talented with writing TSQL queries on the fly. It’s always a pleasure working with him and I always learn multiple new things from him every single time.
US$ 50-US$ 100
Preço
1 dia
Tempo
Útil?I 
iankas

Suíça
was very good. Rockstar in his field. Will definetly order again!
US$ 400-US$ 600
Preço
1 dia
Tempo
A 
Resposta do freelancer
Útil?C craigread

Reino Unido
thanks for the help, knowledgeable, professional, quick, very good communicator, a pleasure to work with
US$ 200-US$ 400
Preço
1 dia
Tempo
A 
Resposta do freelancer
Útil?
