Vou construir pipelines de dados em python, ETL e automatizar fluxos de trabalho de dados
Engenheiro de dados
Sobre este Serviço
Você está procurando por pipelines de dados ETL/ELT robustos, escaláveis e automatizados? Eu ajudo empresas a extrair, limpar, transformar e carregar seus dados de forma fluida para bancos de dados modernos e armazéns de dados na nuvem.
Com mais de 2 anos de experiência prática em Engenharia de Dados, sou especializado em criar fluxos de trabalho de dados confiáveis e tolerantes a falhas usando Python, SQL e AWS.
O que posso fazer por você:
Pipelines ETL/ELT personalizados: ingestão automatizada de APIs REST, webhooks, bancos de dados ou arquivos planos (CSV/JSON/Parquet).
Armazenamento de dados na nuvem: design de esquema, modelagem e carregamento em Snowflake, AWS
Otimização e ajuste de consultas: acelerando consultas SQL lentas e corrigindo gargalos de desempenho.
Orquestração de fluxos de trabalho: agendamento, mapeamento de dependências e alertas automáticos usando Apache Airflow.
Streaming de dados em tempo real: pipelines quase em tempo real usando Apache Kafka.
Qualidade de dados e testes automatizados: implementação de verificações de validação e testes unitários com pytest para evitar corrupção de dados.
Pilha de tecnologia e ferramentas:
Linguagens: Python, SQL
Bancos de dados e armazéns: Snowflake, MySQL
Cloud e Big Data: AWS (S3), Kafka, Airflow
Por favor, envie uma mensagem com seu formato de dados e requisitos do projeto antes de fazer seu pedido!
Destination Platform:
Snowflake
•
Amazon S3
Ferramentas e plataformas:
Outros
Perguntas frequentes
Tradução automática
Quais detalhes você precisa de mim antes de começar?
Por favor, forneça uma visão geral dos requisitos do seu projeto, arquivos de dados de entrada ou esquemas de exemplo, detalhes do banco de dados/destino e credenciais de API ou permissões de acesso necessárias.
Em quais ferramentas e tecnologias você é especializado?
Sou especializado em Python e SQL para construir scripts automatizados de ingestão de dados, transformação e fluxos de trabalho de banco de dados. Trabalho extensivamente com APIs REST, arquivos planos (CSV, JSON, Excel) e bancos de dados relacionais.
E se meus requisitos não se encaixarem nos pacotes pré-definidos?
Sem problema. Cada arquitetura de dados é única. Envie-me uma mensagem explicando sua configuração, e criarei uma oferta personalizada baseada no seu escopo e prazo exatos.
Como você garante a precisão dos dados e a confiabilidade do pipeline?
Implemento regras de validação de esquema, verificações de qualidade de dados, tratamento de casos extremos (como valores nulos ou duplicados) e testes unitários automatizados para garantir que o pipeline funcione de forma confiável sem falhas silenciosas.
Você fornece documentação e suporte pós-entrega?
Sim. Cada entrega concluída inclui documentação clara de configuração e comentários no código para que você possa manter e operar facilmente o pipeline no futuro.

