Eu vou construir pipelines de engenharia de dados de ponta a ponta com AWS, azure e databrick

Você está procurando um Engenheiro de Dados para construir, automatizar, otimizar ou solucionar problemas nos seus pipelines de dados?

Eu ofereço serviços de engenharia de dados de ponta a ponta usando Python, PySpark, SQL, AWS, Azure, Databricks, Apache Airflow e dbt.

O que posso ajudar:

ETL / ELT Pipelines

Extração, transformação e carregamento de dados

Limpeza e validação de dados

Pipelines de dados de fonte única e múltiplas fontes

Engenharia de Dados na AWS

S3, Glue, Athena, Lambda

Firehose e Step Functions

Pipelines de dados na nuvem

Engenharia de Dados na Azure

Azure Data Lake

Data Factory e Synapse

Migração e integração na nuvem

Databricks e Lakehouse

PySpark e SQL

Workflows no Databricks

Arquitetura Bronze/Silver/Gold

Arquitetura Medallion

Orquestração e Automação

Apache Airflow DAGs

Transformações no dbt

Agendamento e automação de workflows

SQL e Qualidade de Dados

SQL complexo e modelagem de dados

Otimização de consultas

Validação e testes de dados

Tratamento de erros e documentação

Foco em construir soluções de dados confiáveis, escaláveis, fáceis de manter e prontas para produção adaptadas às suas necessidades.

Por favor, entre em contato antes de fazer seu pedido para que eu possa entender suas fontes de dados, destino, requisitos e escopo do projeto.

Vamos construir uma solução de dados confiável para o seu negócio