Vou construir pipelines de ETL escaláveis e fluxos de trabalho de big data
Engenheiro de dados
Sobre este Serviço
Você está procurando uma solução confiável e escalável de Engenharia de Dados?
Eu vou projetar, construir, otimizar e solucionar problemas de pipelines profissionais de ETL/ELT, fluxos de trabalho de Big Data e soluções de dados na nuvem adaptadas às suas necessidades.
Serviços que ofereço:
- Desenvolvimento de pipelines ETL & ELT
- Ingestão e transformação de dados
- Processamento com Apache Spark & PySpark
- Pipelines Databricks
- Fluxos de trabalho do Azure Data Factory
- Orquestração com Apache Airflow
- Pipelines de batch & streaming
- Soluções Data Lake & Lakehouse
- Integrações de API, banco de dados e nuvem
- Qualidade e validação de dados
- Otimização e solução de problemas de pipelines
Tecnologias:
Python | SQL | PySpark | Apache Spark | Databricks | Azure Data Factory | Airflow | Kafka | NiFi | Hadoop | Iceberg | Azure | AWS | Docker
Foco em construir pipelines de dados limpos, escaláveis, fáceis de manter e prontos para produção adaptados à sua infraestrutura e requisitos de negócio.
De um pipeline ETL simples até uma arquitetura completa de Big Data ou Lakehouse, posso ajudar a transformar seu projeto de dados em realidade.
Entre em contato antes de fazer seu pedido para discutir suas necessidades.
