Eu vou automatizar seus workflows de ETL com Apache Airflow
Engenheiro de Dados Sênior, Certificado pela AWS, Desenvolvedor Cloudera Spark
Sobre este Serviço
Precisa que seus jobs de ETL sejam agendados, monitorados e confiáveis, ao invés de rodarem manualmente?
Eu crio workflows de Apache Airflow que orquestram pipelines de dados entre bancos de dados, APIs, armazenamento na nuvem, armazéns de dados e jobs de Spark ou Python.
O que posso entregar:
- Design e implementação de DAGs de Airflow
- Operadores Python, operadores Bash, sensores e grupos de tarefas
- Retries, SLAs, alertas e tratamento de falhas
- Workflows parametrizados e configurações de ambiente
- Integração com AWS S3, Glue, EMR, Redshift, Snowflake, Databricks e APIs
- Documentação e orientações para implantação
Por que trabalhar comigo:
- 9 anos como Engenheiro de Dados Sênior
- Experiência em produção com orquestração de ETL e plataformas de dados na nuvem
- Sólida experiência em Python, SQL, Spark, AWS e armazéns de dados
- Código limpo, monitoramento prático e notas de entrega
Por favor, envie uma mensagem antes de fazer o pedido para que eu possa confirmar seus sistemas de origem, dependências de agendamento e ambiente de implantação.
Outros serviços de Engenharia de Dados que eu ofereço
Perguntas frequentes
Tradução automática
Você consegue trabalhar com ambientes de Airflow já existentes?
Sim. Posso atualizar DAGs existentes ou criar novos workflows para Composer, MWAA, Airflow gerenciado por você ou outras implantações de Airflow.
