Vou construir sua pipeline de dados com airflow e spark

Algumas informações foram traduzidas automaticamente.
Hammad H

Paquistão

Eu falo Inglês, Japonês

Engenheiro de software

Sou engenheiro de software com 3 anos de experiência no desenvolvimento e otimização de serviços de backend para sistemas de processamento de pagamento em grande escala. Implementei pipelines de proce...
Saiba mais
Sobre este Serviço

Construa pipelines de dados confiáveis, escaláveis e prontas para a nuvem.


Está tendo dificuldades para mover ou transformar seus dados de forma eficiente? Eu me especializo em criar pipelines de dados de ponta a ponta que automatizam a ingestão, transformação, validação e carregamento em ambientes de nuvem e locais.


Com mais de 2,5 anos de experiência e ferramentas como Spark, SQL, Python, Databricks, Snowflake, AWS e GCP, ajudo você a transformar dados brutos e desorganizados em insights de nível de produção.


O que eu ofereço:

  • Pipelines ETL e ELT (batch e streaming)
  • Integração com APIs, armazenamento na nuvem e bancos de dados
  • Implantação nativa na nuvem: AWS Glue, Lambda, Azure ADF, Databricks, GCP Dataflow
  • Arquitetura em tempo real usando Kafka, Pub/Sub ou Event Hubs
  • Limpeza de dados, verificações de qualidade, registro de auditoria


Nota: Me envie uma mensagem antes de fazer seu pedido para garantir que eu entenda exatamente o escopo do seu projeto!


Saiba mais
build your data pipeline with airflow and spark
Tela Inteira
build your data pipeline with airflow and spark
Tela Inteira
build your data pipeline with airflow and sparkbuild your data pipeline with airflow and spark

Idioma:

Inglês

Experiência técnica:

dbt (Data Build Tool)

•

Apache Airflow

+ 3

Especialidade:

Pipelines de dados

•

Desenvolvimento de ETL

+ 2

Setor:

Vídeo e áudio

•

Data analytics

•

Serviços financeiros

+ 1

Tags relacionadas