eu vou construir um pipeline de ingestão de API em Python para o PostgreSQL

Algumas informações foram traduzidas automaticamente.

Brasil

Eu falo Inglês

Engenheiro de dados e desenvolvedor Python

Sou um Data Engineer em Python especializado em pipelines automatizadas de ingestão de dados, integrações de API e otimização de PostgreSQL. Ajudo empresas a eliminar planilhas manuais frágeis e sinc...
Sobre este Serviço
Pare de perder horas com exportações manuais diárias de CSV de ERPs ou de consertar painéis que quebram quando as APIs limitam a taxa ou dão timeout. Vou montar um motor de ingestão de dados em Python resiliente para até 3 endpoints REST API, entregando loads incrementais limpos e sem duplicatas diretamente em PostgreSQL ou Parquet. O que está incluído em cada entrega: - pipeline de ingestão em Python com tratamento de rate limit, paginação automática e retries exponenciais - loads incrementais sem duplicatas em PostgreSQL ou Parquet - tabela de auditoria de execução (pipeline_runs_audit) para acompanhar cada rodada do pipeline - implantação em Docker Compose containerizada com agenda automática - runbook de operações passo a passo e documentação de configuração Como vamos trabalhar: 1. diagnóstico técnico rápido para revisar seus endpoints de API e o schema alvo 2. escopo fixo e cronograma claro de entrega 3. implantação testada do Docker Compose com logs de auditoria ao vivo Arquitetura comprovada baseada em padrões de engenharia de produção (comex-data-engine-v2). Me envie suas documentações da API ou a origem do ERP antes de pedir para alinharmos seus endpoints e schema.

Destination Platform:

Snowflake

•

Databricks Lakehouse

•

PostgreSQL

Ferramentas e plataformas:

Outros

Meu portfólio

Outros serviços de Engenharia de Dados que eu ofereço