Vou desenvolver pipelines de ETL de ponta a ponta usando python, pyspark e serviços da azure

Sou um Engenheiro de Dados com 2,8 anos de experiência trabalhando com Azure e Palantir Foundry. Especializo-me em construir pipelines ETL escaláveis e processar grandes conjuntos de dados usando Python, PySpark e SQL.

Posso projetar e desenvolver pipelines de dados eficientes, realizar transformação de dados e integrar dados de múltiplas fontes usando ferramentas modernas de engenharia de dados.

Tecnologias com as quais trabalho:

Python

PySpark

SQL

Azure Data Factory

Azure Data Lake

Palantir Foundry

Serviços que ofereço:

Desenvolvimento de pipelines ETL

Processamento de dados com PySpark

Otimização de consultas SQL

Pipelines do Azure Data Factory

Pipelines de dados do Palantir Foundry

Limpeza e transformação de dados

Meu foco é entregar soluções de engenharia de dados confiáveis, escaláveis e prontas para produção.