Vou consertar e otimizar pipelines de dados ETL com airflow ou nifi

Algumas informações foram traduzidas automaticamente.

Paquistão

Eu falo Inglês, Urdu, Panjabi, Alemão

Engenheiro de Big Data

Engenheiro de Dados sênior com mais de 7 anos criando pipelines de dados e lakehouses de nível de produção para clientes corporativos. Sou especialista em Apache NiFi, Airflow, Spark ETL e design de d...
Sobre este Serviço

Seu pipeline de dados está instável, lento ou ainda nem foi criado? Eu vou projetar e entregar um pipeline pronto para produção, feito sob medida para sua arquitetura.

O que eu ofereço:

  • Design e implantação de pipeline Apache NiFi (Docker ou Kubernetes)
  • Desenvolvimento de DAGs no Airflow, agendamento, retries, alertas, dependências
  • Jobs ETL com PySpark e Spark SQL para transformação de dados em grande escala
  • Ingestão de APIs REST, SAP OData, S3/MinIO, bancos de dados e arquivos planos
  • Processadores personalizados no NiFi em Java para lógica de negócios complexa

Por que trabalhar comigo:

  • Mais de 7 anos de experiência real em empresas construindo pipelines para clientes corporativos na Alemanha
  • Já criei pipelines que lidam com milhões de registros em arquiteturas complexas de múltiplas fontes
  • Cada entrega inclui tratamento de erros, logs e documentação, não só código funcionando

O que NÃO faço:

  • Soluções rápidas de copiar e colar
  • Tutoriais reembalados como entregáveis

Não sabe exatamente o que precisa? Mande uma mensagem para uma consultoria de arquitetura gratuita de 15 minutos.

Destination Platform:

PostgreSQL

Oracle Database / Exadata

Ferramentas e plataformas:

Kafka Connect

Oracle GoldenGate

Meu portfólio