Serei seu engenheiro de dados para soluções de databricks pyspark ETL e lakehouse

Algumas informações foram traduzidas automaticamente.

Paquistão

Eu falo Inglês

Engenheiro de Dados na Nuvem

Oi, eu sou o Soban, um Engenheiro de Dados com mais de 3 anos de experiência prática em criar e entregar soluções de dados completas. Sou especializado em Snowflake, Airflow, Kafka, Azure Data Factory...
Sobre este Serviço

Vou criar pipelines de dados robustos e soluções de lakehouse usando Databricks, PySpark, Apache Spark, Spark SQL e Delta Lake.

O que posso construir:

Pipelines ETL/ELT no Databricks

Transformações de dados com PySpark

Processamento de dados em lote

Soluções Delta Lake

Arquitetura Medallion

Camadas de dados Bronze, Silver e Gold

Processamento incremental de dados

Limpeza e validação de dados

SCD Tipo 1 / Tipo 2

Modelagem de dados e conjuntos de dados prontos para análise

Posso trabalhar com dados estruturados de arquivos CSV, APIs, bancos de dados e outras fontes suportadas, transformando-os em conjuntos de dados limpos e confiáveis para análises e aplicações downstream.

Por favor, entre em contato antes de fazer o pedido para que eu possa revisar seus requisitos e recomendar o pacote adequado.

Especialidade:

Integração via API

•

Big data

•

Extração de dados

Tecnologia:

Apache Kafka

•

apache spark

•

Python

•

SQL

•

Snowflake

Meu portfólio

Outros serviços de Engenharia de Dados que eu ofereço