Eu serei seu engenheiro de dados para projetos de airflow, spark e dbt
Head de Data Platform
Sobre este Serviço
Eu crio e conserto pipelines de dados com Airflow, dbt e Spark.
Sou responsável pela plataforma de dados em um grande marketplace de e-commerce: mais de 1.000 DAGs do Airflow, 600 TB de dados, 130+ usuários de dados. Trabalho com engenharia de dados desde 2019.
O que posso fazer por você:
- Corrigir DAGs do Airflow com falhas ou lentidão, jobs de Spark e modelos dbt que travam
- Construir pipelines ETL/ELT de bancos de dados, APIs e arquivos para o seu data warehouse
- Configurar Airflow, dbt e Spark em Docker ou Kubernetes
- Projetar tabelas no ClickHouse, PostgreSQL, Trino e Iceberg
- Transmitir mudanças de banco de dados com Debezium e Kafka
- Adicionar testes de qualidade de dados e alertas
Como eu trabalho:
- Você descreve a tarefa, e concordamos com o escopo e o prazo antes de você fazer o pedido.
- Eu trabalho no seu repositório ou entrego o código que você implementa.
- Você recebe código funcionando, documentação curta e uma call de entrega.
Me mande uma mensagem antes de pedir para eu confirmar se a tarefa cabe no pacote.
Perguntas frequentes
Tradução automática
O que você precisa de mim para começar?
Uma descrição da tarefa e acesso ao código
Você pode trabalhar com minha configuração atual?
Sim. Posso trabalhar no seu repositório, na nuvem ou em cluster Kubernetes, ou entregar código que você implemente
E se minha tarefa não se encaixar em um pacote?
Envie-me os detalhes. Vou enviar uma oferta personalizada com o escopo, prazo e preço certos
Você aceita trabalhos de longo prazo?
Sim. Para suporte contínuo posso trabalhar mensalmente ou por hora através de uma oferta personalizada
