vou construir pipelines de pyspark etl para dados em lotes e streaming na AWS

Algumas informações foram traduzidas automaticamente.

Paquistão

Eu falo Urdu, Inglês

1 pedido finalizado

Engenheiro de Dados para PySpark, AWS e QuickSight

Sou Muhammad Zeeshan, engenheiro de dados trabalhando em tempo integral em plataformas de dados AWS. Eu gero pipelines ETL PySpark (batch e streaming) no Amazon EMR, configuro data lakes no S3 e trans...
Sobre este Serviço
Precisa de uma tarefa PySpark confiável ou de um pipeline ETL completo? Sou engenheiro de dados em tempo integral e construir pipelines em batch e streaming com PySpark na AWS é o meu dia a dia. O que posso fazer por você: - Escrever jobs PySpark ETL: ingestão, limpeza, transformação, carregamento - Processar grandes conjuntos de dados em batch no Amazon EMR - Construir jobs de streaming para dados em tempo real - Integrar seus jobs com Apache Hive e Apache Hudi - Configurar ou organizar um data lake no Amazon S3 - Otimizar ou depurar código PySpark existente O que você recebe: - Código limpo e comentado - Notas rápidas sobre como executar e agendar - Respostas geralmente em uma hora Como funciona: 1. Envie a fonte de dados, o destino e a transformação que você precisa 2. Confirmo o escopo, o preço e o prazo 3. Entrego o código e reviso com base no seu feedback Por favor, me mande uma mensagem antes de pedir o serviço para alinharmos o escopo primeiro.

Especialidade:

Big data

•

Manipulação de dados

•

etl

•

Transformação

•

SQL

Tecnologia:

Apache Hadoop

•

apache spark

•

Excel

•

Python

•

SQL

•

NoSQL