Eu vou construir uma pipeline ETL em python para CSV, Excel, API e SQL

Algumas informações foram traduzidas automaticamente.

Paquistão

Eu falo Urdu, Inglês

Engenheiro de backend e dados que cria APIs escaláveis, bancos de dados e sistemas ETL

Eu projeto e construo bancos de dados e backends por trás de produtos com grande volume de dados. Arquitetura PostgreSQL/MySQL, SaaS multi-tenant com isolamento de inquilino a nível de banco de dados,...

Saiba mais

Sobre este Serviço

Se seus dados estão muito grandes, confusos ou manuais neste momento, eu vou automatizá-los.

Prova: Eu criei uma pipeline que processa mais de 2 bilhões de linhas para uma plataforma financeira, transformando um conjunto de dados brutos de 7GB e mais de 2 milhões de documentos em um data lake estruturado e pesquisável em duas semanas, sozinho.

O que eu construo:

Pipeline ETL personalizada (extrair, limpar, transformar, carregar)

Grandes conjuntos de dados manipulados sem travar a memória

Pipeline recomeçável e idempotente

Validação de dados e verificações de qualidade

Carregamento em PostgreSQL, MySQL ou Parquet

Registro de logs e tratamento de erros

Configuração de agendamento/automação

Fontes: CSV, Excel, JSON, APIs REST, PostgreSQL, MySQL, SQLite, Parquet.

Envie-me uma amostra dos seus dados e seu objetivo final, e eu farei o escopo da pipeline antes de você fazer o pedido.

pipeline ETL

python