Eu farei extração, raspagem, crawling, transformação, pipeline de carga de dados

Tá tendo dificuldade pra mover, limpar ou transformar seus dados de forma eficiente?

Eu vou criar e montar pipelines ETL (Extract, Transform, Load) robustos feitos sob medida para as suas necessidades, pra você focar nos insights, não na infraestrutura.

O que você vai receber:

• Extração de dados de APIs, bancos de dados (MySQL, PostgreSQL, MongoDB), arquivos planos (CSV, Excel, JSON, Parquet)
• Transformação de dados usando Python, SQL, Pandas, Spark
• Carga de dados em data warehouses como BigQuery, Snowflake, Redshift ou bancos de dados
• ️ Agendamento automatizado usando Airflow ou schedulers nativos na nuvem
• ️ Integração com a nuvem: AWS, GCP, Azure S3, Lambda, Cloud Functions
• Verificações de qualidade de dados e logs para transparência e depuração
• Arquitetura segura e escalável com suporte a CI/CD (GitHub Actions, Docker)

Tecnologias que eu uso:

• Python, SQL, Spark, dbt
• Apache Airflow, Prefect, Luigi
• PostgreSQL, MySQL, MongoDB
• BigQuery, Redshift, Snowflake
• Serviços de dados AWS/GCP/Azure
• Docker, Git, Terraform (infra opcional)

Por favor entre em contato comigo agora para discutir seu projeto e receber uma cotação gratuita.