Vou construir pipelines de dados em python, ETL e automatizar fluxos de trabalho de dados

Algumas informações foram traduzidas automaticamente.

Índia

Eu falo Inglês, Hindi

Engenheiro de dados

Oi, eu sou Aman, um Engenheiro de Dados especializado em Python, SQL e pipelines de dados. Ajudo empresas a automatizar fluxos de trabalho, integrar APIs com bancos de dados, limpar e transformar dado...
Sobre este Serviço

Você está procurando por pipelines de dados ETL/ELT robustos, escaláveis e automatizados? Eu ajudo empresas a extrair, limpar, transformar e carregar seus dados de forma fluida para bancos de dados modernos e armazéns de dados na nuvem.


Com mais de 2 anos de experiência prática em Engenharia de Dados, sou especializado em criar fluxos de trabalho de dados confiáveis e tolerantes a falhas usando Python, SQL e AWS.


O que posso fazer por você:

Pipelines ETL/ELT personalizados: ingestão automatizada de APIs REST, webhooks, bancos de dados ou arquivos planos (CSV/JSON/Parquet).

Armazenamento de dados na nuvem: design de esquema, modelagem e carregamento em Snowflake, AWS

Otimização e ajuste de consultas: acelerando consultas SQL lentas e corrigindo gargalos de desempenho.

Orquestração de fluxos de trabalho: agendamento, mapeamento de dependências e alertas automáticos usando Apache Airflow.

Streaming de dados em tempo real: pipelines quase em tempo real usando Apache Kafka.

Qualidade de dados e testes automatizados: implementação de verificações de validação e testes unitários com pytest para evitar corrupção de dados.


Pilha de tecnologia e ferramentas:

Linguagens: Python, SQL

Bancos de dados e armazéns: Snowflake, MySQL

Cloud e Big Data: AWS (S3), Kafka, Airflow


Por favor, envie uma mensagem com seu formato de dados e requisitos do projeto antes de fazer seu pedido!


Destination Platform:

Snowflake

Amazon S3

Ferramentas e plataformas:

Outros