Vou construir pipelines de dados ETL ELT usando airflow, spark e sql

Algumas informações foram traduzidas automaticamente.

Bangladesh

Eu falo Inglês, Bengali, Hindi, Urdu

Optar pelo Silêncio para transmitir minha Angústia

Engenheiro de Dados dinâmico com expertise em Data Science & Analytics, Apache Airflow, Spark, pipelines ETL, Data Warehouse (Iceberg, RedShift, BigQuery), conhecimento avançado em SQL (CTEs, funções ...
Sobre este Serviço

Sou um engenheiro de dados profissional, especializado em criar e montar pipelines de dados escaláveis, confiáveis e totalmente automatizados que transformam dados brutos em conjuntos de dados limpos e prontos para análise. Meu foco é desenvolver fluxos de ETL/ELT eficientes que garantam alto desempenho, precisão dos dados e fluxo contínuo de informações entre sistemas.

Trabalho com ferramentas e tecnologias modernas de engenharia de dados, como Apache Airflow, Apache Spark, SQL e Apache Iceberg, para construir soluções robustas de processamento de dados. Minha expertise inclui ingestão, transformação, orquestração, otimização e design de armazéns de dados.

Se você precisa de pipelines de processamento em batch, fluxos de dados em tempo real ou uma solução completa de data warehouse, posso te ajudar a montar uma arquitetura de dados forte e escalável, feita sob medida para as suas necessidades. Meu objetivo é garantir automação, confiabilidade e desempenho em cada solução que entrego.

Destination Platform:

PostgreSQL

mySQL

Amazon S3

Ferramentas e plataformas:

Google Cloud Dataflow

Kafka Connect

Meu portfólio