Vou escrever, otimizar e depurar pipelines ETL em pyspark e databricks

Algumas informações foram traduzidas automaticamente.

Espanha

Eu falo Espanhol, Inglês

Engenheiro de dados

Sou um engenheiro de computação apaixonado e desenvolvedor de Big Data, especializado em desenvolvimento de Back-End e processamento de dados com Spark e tecnologias de nuvem. Tenho ampla experiência ...
Sobre este Serviço

Você está enfrentando consultas lentas no BigQuery, modelos dbt quebrados ou jobs Spark não otimizados? 


Sou um Engenheiro de Dados Sênior (Certificado Associado da Databricks) com mais de 5 anos de experiência construindo e otimizando arquiteturas de dados escaláveis na nuvem (GCP, Databricks, BigQuery). Especializo-me em transformar pipelines de dados complexos, lentos e caros em fluxos de trabalho rápidos, eficientes e econômicos.


O que posso fazer por você:

- dbt & Data Warehousing: Construir e refatorar modelos dbt seguindo a arquitetura Medallion (Bronze, Silver, Gold), otimizar consultas SQL e configurar execuções no Cloud Run / Control-M / Airflow.

- PySpark & Databricks: Depurar, refatorar e acelerar pipelines ETL em batch com Spark (Scala/Python).

- Arquitetura de Nuvem GCP: Configurar pipelines escaláveis com BigQuery, Cloud Run e Airflow/Composer.

- Otimização de Banco de Dados & Consultas: Reduzir custos de processamento e tempos de execução no BigQuery/Snowflake.


Por que trabalhar comigo?

- Expertise Certificada: Engenheiro de Dados Certificado da Databricks & Certificado Azure.

- Código de Alta Qualidade: Práticas de engenharia de dados limpas, modulares e fáceis de manter.

- Comunicação Clara & Direta: Disponível em inglês e espanhol.


OBS: Entre em contato comigo com seus requisitos antes de fazer seu pedido

Destination Platform:

Google BigQuery

•

Azure Synapse Analytics

Ferramentas e plataformas:

Google Cloud Dataflow

•

Apache NiFi

Tags relacionadas