Vou construir um scraper web em python, API ou pipeline de dados

Algumas informações foram traduzidas automaticamente.

Reino Unido

Eu falo Malaiala, Inglês

Engenheiro de Backend

Sou engenheiro de backend que constrói sistemas de dados em tempo real, atualmente focado no Stopboard, um painel de partidas de ônibus ao vivo que atende mais de 50 usuários diários. Tenho quatro ano...
Sobre este Serviço

Eu crio scrapers em Python e pipelines de dados que extraem, limpam e entregam dados estruturados de sites, APIs e feeds públicos.

O que você recebe: um script Python funcional que faz o scraping da sua fonte alvo e gera CSV limpo, JSON ou envia diretamente para seu banco de dados. Eu cuido de paginação, limitação de taxa, autenticação e HTML bagunçado.

Trabalho com: BeautifulSoup, Scrapy, Selenium, REST APIs, FastAPI, PostgreSQL. Já criei pipelines de dados em produção que ingerem feeds em tempo real e alimentam dashboards ao vivo (stopboard.uk).

O que preciso de você: a(s) URL(s) que deseja fazer o scraping e os campos de dados que precisa. Confirmarei a viabilidade antes de começar.

Tecnologia:

Python

Planilhas Google

Coletor de dados instantâneo

Tipo de informação:

Pesquisa de concorrentes

Técnica:

Automatizado

Meu portfólio