Eu vou construir pipelines de dados ETL em python para APIs, SQL e CSV
Desenvolvedor Web e Engenheiro de Dados
Sobre este Serviço
Está tendo dificuldades com dados desorganizados, relatórios manuais ou fluxos de trabalho de dados pouco confiáveis que atrasam as decisões de negócio?
Eu vou criar um pipeline de dados ETL / ELT em Python para extrair, limpar, transformar e carregar dados de APIs, arquivos CSV/Excel, bancos de dados SQL, armazenamento na nuvem ou CRMs para dashboards, relatórios, análises, ML ou fluxos de trabalho prontos para IA.
Você vai receber:
- pipelines ETL / ELT para ingestão e transformação automatizada de dados
- Integrações com API, CSV, Excel, banco de dados SQL e armazenamento na nuvem
- pipelines em lote agendados por hora, dia, semana ou sob demanda
- Carregamento em data warehouse no BigQuery, Redshift, PostgreSQL, Snowflake ou ClickHouse
- modelos dbt para staging, cargas incrementais, testes e documentação
- Orquestração com Airflow, Cloud Composer, cron ou agendadores na nuvem
- Verificações de qualidade de dados, validação, logs e tratamento de erros
Pilha tecnológica:
- Python, SQL, dbt
- Airflow, Airbyte
- Kafka, Debezium
- BigQuery, Redshift, Snowflake, ClickHouse
- MySQL, PostgreSQL, MongoDB
- AWS Glue, Lambda, S3, Kinesis, DMS
- GCP Dataflow, Pub/Sub, Datastream
Me envie uma mensagem antes de fazer o pedido para que eu possa entender suas necessidades.
Perguntas frequentes
Tradução automática
Você trabalha com scripts ETL em Python?
Sim. Posso criar scripts ETL em Python para extração, limpeza, transformação, validação, carregamento, logs e tratamento de erros.
Você consegue automatizar minha pipeline de dados em uma programação?
Sim. Posso agendar sua pipeline de dados para rodar de hora em hora, diariamente, semanalmente ou em uma programação personalizada usando Airflow, cron, Cloud Composer, orquestradores na nuvem ou outras ferramentas de orquestração.
