Eu serei seu engenheiro de dados para projetos de airflow, spark e dbt

Algumas informações foram traduzidas automaticamente.

Rússia

Eu falo Russo, Inglês

Head de Data Platform

Sou o Head of Data Platform na Uzum, ondeBUILD dados escaláveis, confiáveis e fáceis de usar. Lidero uma equipe de engenheiros de dados e trabalho ativamente em toda a pilha, incluindo data lakes, dat...
Sobre este Serviço

Eu crio e conserto pipelines de dados com Airflow, dbt e Spark.


Sou responsável pela plataforma de dados em um grande marketplace de e-commerce: mais de 1.000 DAGs do Airflow, 600 TB de dados, 130+ usuários de dados. Trabalho com engenharia de dados desde 2019.


O que posso fazer por você:

  • Corrigir DAGs do Airflow com falhas ou lentidão, jobs de Spark e modelos dbt que travam
  • Construir pipelines ETL/ELT de bancos de dados, APIs e arquivos para o seu data warehouse
  • Configurar Airflow, dbt e Spark em Docker ou Kubernetes
  • Projetar tabelas no ClickHouse, PostgreSQL, Trino e Iceberg
  • Transmitir mudanças de banco de dados com Debezium e Kafka
  • Adicionar testes de qualidade de dados e alertas

Como eu trabalho:

  1. Você descreve a tarefa, e concordamos com o escopo e o prazo antes de você fazer o pedido.
  2. Eu trabalho no seu repositório ou entrego o código que você implementa.
  3. Você recebe código funcionando, documentação curta e uma call de entrega.

Me mande uma mensagem antes de pedir para eu confirmar se a tarefa cabe no pacote.

Idioma:

Inglês

Experiência técnica:

dbt (Data Build Tool)

•

Apache Airflow

Especialidade:

Pipelines de dados

•

Configuração de data lake

Setor:

Data analytics

•

Serviços financeiros

•

Alimentos e bebidas