Vou construir pipelines de dados ETL ELT usando airflow, spark e sql

Você está procurando um profissional de Data Engineer para construir pipelines de dados escaláveis e automatizados?

Eu sou especializado em projetar e desenvolver soluções de engenharia de dados de ponta a ponta que transformam dados brutos em conjuntos de dados limpos, estruturados e prontos para análise. Ajudo empresas a automatizar o processamento de dados, melhorar a qualidade dos dados e criar fluxos de trabalho confiáveis.

Meus serviços incluem:

1. Desenvolvimento de pipelines ETL/ELT
2. Ingestão e Integração de Dados
3. Automação de workflows com Apache Airflow
4. Processamento de Dados com Apache Spark
5. Desenvolvimento e Otimização de SQL
6. Design de Data Warehouse
7. Implementação de Apache Iceberg
8. Limpeza e Transformação de Dados
9. Pipelines em lote e em tempo real
10. Validação de Qualidade de Dados

Tecnologias:

1. Apache Airflow
2. Apache Spark
3. Python
4. SQL Complexo
5. Apache Iceberg
6. Oracle, PostgreSQL, MySQL, MSSQL
7. Data Warehouse (DWH)

Por que me escolher?

• Soluções automatizadas e escaláveis
• Pipelines de dados confiáveis
• Desempenho otimizado
• Comunicação clara
• Entrega no prazo

Seja para desenvolvimento de ETL, automação de workflows, processamento com Spark ou uma solução completa de data warehouse, posso entregar uma arquitetura robusta e escalável, feita sob medida para as necessidades do seu negócio.