Vou construir um pipeline de dados automatizado com scrapers em python, ETL e banco de dados

Algumas informações foram traduzidas automaticamente.
Shah Hussain

Paquistão

Eu falo Pashto, Urdu, Inglês

74 pedidos finalizados

Web scraping em Python, pipelines de dados e automação com IA

Desenvolvedor sênior de Python (mais de 6 anos) criando web scrapers, pipelines de dados e automações de IA que rodam em produção. • Raspagem de qualquer site, incluindo sites com JavaScript, login e...
Saiba mais

Nível 2

Atendeu a critérios de alto desempenho e tem um histórico comprovado de atendimento às expectativas dos clientes.

Sobre este Serviço

Scripts que quebram toda semana custam mais do que economizam. Eu construo pipelines de dados de produção que coletam, limpam e entregam seus dados na hora certa, e continuam funcionando.

O que eu construo:

  • Scrapers agendados e coletores de API para qualquer número de fontes
  • ETL: limpeza, deduplicação, validação e enriquecimento com IA
  • Carregamento em PostgreSQL, MySQL, Google Sheets ou sua API
  • Monitoramento e alertas, para você saber quando algo dá errado
  • Implantação no seu servidor ou na nuvem (AWS, GCP, DigitalOcean) com Docker

Comprovado em escala:

  • Um pipeline que extrai mais de 1 milhão de registros de propriedades toda semana
  • Um sistema que coleta alvarás de construção de mais de 100 jurisdições nos EUA e 13 tipos de portal
  • Um CRM imobiliário com dados ao vivo de 5 fontes em mais de 30 condados

Você recebe código fonte limpo e documentação. Me envie suas fontes e destino, e eu proponho uma arquitetura e um preço fixo.

Saiba mais
build an automated data pipeline with python scrapers, etl and database
Tela Inteira
build an automated data pipeline with python scrapers, etl and database
Tela Inteira
Tela Inteira
build an automated data pipeline with python scrapers, etl and databasebuild an automated data pipeline with python scrapers, etl and databasebuild an automated data pipeline with python scrapers, etl and database

Destination Platform:

PostgreSQL

•

mySQL

•

Amazon S3

Ferramentas e plataformas:

Outros

Meu portfólio

Tags relacionadas