Vou construir uma pipeline de dados ETL em python para seu negócio

Algumas informações foram traduzidas automaticamente.

Índia

Eu falo Inglês, Canarim, Hindi

Engenheiro de dados

Sou um Engenheiro de Dados com mais de 3 anos de experiência em produção construindo pipelines de dados escaláveis na AWS e Azure — processando mais de 50 milhões de registros por dia com uma melhora ...
Sobre este Serviço

Tem dificuldades com pipelines de dados lentos ou pouco confiáveis? Eu vou criar

uma pipeline ETL limpa, de nível de produção usando Python, PySpark

e Databricks pronta para ser implantada desde o primeiro dia.


Tenho mais de 3 anos de experiência real em produção processando mais de 50M+

registros diariamente na AWS e Azure.


O QUE EU VOU CONSTRUIR:

pipelines ETL/ELT (extrair, transformar, carregar)

streaming em tempo real com Apache Kafka

Arquitetura Medallion (Bronze/Silver/Gold)

pipelines na AWS (S3, EMR, Lambda, Boto3)

notebooks Databricks e jobs PySpark

verificações de qualidade de dados e validações


PILHA TECNOLÓGICA:

Python, SQL, PySpark, Apache Spark, Databricks,

AWS, Kafka, Docker, Flask, FastAPI, Git


VOCÊ RECEBERÁ:

código limpo, bem comentado

documentação completa e README

pipeline pronta para implantação

suporte pós-entrega


POR QUE ESCOLHER MIM:

experiência real em produção, não apenas tutoriais

certificado em AWS, Azure e Databricks

entrega no prazo, comunicação clara


Me envie uma mensagem antes de fazer o pedido para que eu possa confirmar

sua necessidade e entregar exatamente o que você precisa!

Destination Platform:

Snowflake

Amazon Redshift

Ferramentas e plataformas:

Google Cloud Dataflow

Kafka Connect

Meu portfólio