Vou construir pipeline de ETL automatizado usando python, airflow e sql
Engenheiro de dados
Sobre este Serviço
Eu construo pipelines ETL automatizados que coletam, processam e armazenam dados de forma eficiente.
Eu extraio dados de APIs, arquivos ou fontes web, transformo em formatos estruturados limpos e os carrego em bancos de dados para análise. Automatizo fluxos de trabalho para que seus dados sejam atualizados sem esforço manual.
O que posso fazer:
- Construir pipelines ETL de ponta a ponta
- Extrair dados de APIs, CSV, Excel ou sites
- Limpar e transformar dados brutos usando Python
- Carregar dados em MySQL, PostgreSQL ou MongoDB
- Automatizar fluxos de trabalho usando cron ou Airflow
- Otimizar desempenho para grandes volumes de dados
Ferramentas:
Python, Pandas, FastAPI, Airflow, Apache Kafka, MySQL, PostgreSQL, AWS
Por que me escolher:
- Código limpo e confiável
- Soluções escaláveis
- Comunicação clara
Entre em contato comigo antes de fazer seu pedido.
Ferramentas e plataformas:
Airbyte
•
AWS Glue DataBrew
•
Apache NiFi
Meu portfólio
Perguntas frequentes
Tradução automática
O que você precisa para começar?
Preciso dos detalhes da sua fonte de dados, requisitos e formato de saída esperado.
Você pode automatizar o pipeline?
Sim. Posso agendar jobs de ETL usando cron ou Airflow.
Quais fontes de dados você consegue lidar?
APIs, CSV, Excel, bancos de dados e dados web.
Quais bancos de dados você suporta?
MySQL, PostgreSQL, MongoDB e outros, se necessário.
Você pode lidar com grandes conjuntos de dados?
Sim. Otimizo pipelines para desempenho e escalabilidade.
Você fornece revisões?
Sim. Revisões dependem do pacote que você escolher.
