Vou construir pipelines ETL robustos fluxos de trabalho de dados em python e sql
Engenheiro de dados
Sobre este Serviço
tarefas manuais de dados estão atrasando seu negócio ou você precisa de um pipeline confiável para mover e transformar dados entre bancos de dados, APIs e armazenamento na nuvem?
Eu crio pipelines ETL/ELT de nível de produção, scripts personalizados de web scraping/ingestão e fluxos de trabalho de banco de dados projetados para confiabilidade, velocidade e facilidade de manutenção.
Serviços principais oferecidos:
Pipelines ETL/ELT personalizados: extração, transformação e carregamento automatizados através de APIs, bancos de dados, arquivos planos (CSV/JSON/Parquet) e armazenamento na nuvem.
Integração de dados e ingestão de API: conexão com APIs de terceiros (REST/GraphQL), webhooks e ferramentas SaaS para armazéns de dados centralizados ou bancos relacionais.
Design de banco de dados e otimização SQL: modelagem de esquema, indexação de tabelas, ajuste de consultas e migrações automatizadas (PostgreSQL, MySQL, SQLite, Snowflake, BigQuery).
Automação de fluxo de trabalho e orquestração: agendamento e monitoramento de fluxos de trabalho usando scripts Python, cron jobs ou DAGs do Apache Airflow.
Limpeza e pré-processamento de dados: tratamento de valores ausentes, aplicação de esquema, deduplicação e formatação estruturada com Pandas/NumPy.
Extração de dados e web scraping: extração de dados limpos e estruturados
