Vou construir pipelines de engenharia de dados na AWS usando python, pyspark, sql e glue

Você está procurando um Engenheiro de Dados experiente para criar pipelines de dados confiáveis e escaláveis?

Eu vou desenvolver e otimizar soluções de engenharia de dados na AWS, ETL/ELT e processamento de dados usando Python, PySpark, SQL, AWS Glue, S3, Redshift, Athena e Databricks.

Veja como posso te ajudar:

• Pipelines ETL/ELT com AWS Glue
• Transformação de dados com Python & PySpark
• Soluções de data lake com AWS S3
• Consultas SQL e otimizações
• Armazenamento de dados com Amazon Redshift
• Tabelas externas e análises com Athena
• Pipelines com Databricks & Delta Lake
• Ingestão de dados via API e banco de dados
• Limpeza, transformação e validação de dados
• Soluções para problemas em ETL e otimização de desempenho
• Processamento de dados em batch e pipelines incrementais

Meu foco é criar soluções de dados limpas, escaláveis, fáceis de manter e prontas para produção, de acordo com suas necessidades de negócio.

Seja para criar uma nova pipeline de dados, otimizar um fluxo existente ou ajudar na resolução de problemas no seu projeto de engenharia de dados, posso ajudar.

Tecnologias: AWS | Python | PySpark | SQL | Glue | S3 | Redshift | Athena | Databricks | Delta Lake