Vou construir pipeline de etl, limpeza de dados, enriquecimento de dados

Algumas informações foram traduzidas automaticamente.

China

Eu falo Chinês, Inglês

Engenheiro de dados, ETL, APIs e automação de BI

Oi, eu sou o Jay — um Especialista em Engenharia de Dados e Automação com experiência em liderar uma equipe de mais de 15 Engenheiros de Dados. Ajudo empresas a criar soluções de dados escaláveis, fl...
Sobre este Serviço

O que eu posso fazer

Ajudo empresas a automatizar, organizar e otimizar seus fluxos de trabalho de dados desde a coleta até o relatório.


Meus serviços incluem:

Desenvolvimento e otimização de consultas SQL

Fluxos de trabalho automatizados de dados e sistemas de relatórios

Processamento em lote de dados com soluções escaláveis

Processamento de dados em tempo real e pipelines de streaming

Limpeza, transformação e integração de dados

Integração de API e sincronização automática de dados

Design de banco de dados e data warehouse

Soluções de relatórios de negócios e dashboards

Visualização de dados com Power BI e Tableau

Soluções completas de automação de dados para startups e empresas


  • Experiência na migração de dados de sistemas legados (On-premise) e APIs para Azure Data Lake, realizando transformações complexas nos dados usando DataBricks (Python e PySpark), movendo os dados processados para SQL Server / PostgreSQL / Data ou Delta Lake.


  • Experiência na implementação de fluxos de trabalho escaláveis, otimizados de ponta a ponta, no Azure Data Factory / Databricks para extrair, processar e armazenar dados de diversas fontes.

Tecnologia:

Apache Hadoop

Apache Kafka

JAVA

Python

Scala

Powershell

Especialidade:

Integração via API

Aquisição de dados

Meu portfólio

Outros serviços de Processamento de Dados que eu ofereço