Eu vou construir um scraper confiável com playwright e nodejs ou typescript

A maioria dos scrapers funciona no primeiro dia e morre na primeira mudança de layout do site. Eu construo os que continuam rodando.

Trabalho com Playwright e Node ou TypeScript, então logins, scroll infinito, popups e toda aquela estranheza do javascript são resolvidos. Os dados saem limpos em JSON, CSV, Google Sheets ou direto para um banco de dados. Para tarefas recorrentes, adiciono agendamento, retries e detecção de mudanças, assim você sabe o que é novo, o que mudou e o que desapareceu desde a última execução, ao invés de receber um dump bruto toda hora e precisar comparar manualmente.

Eu executo esse tipo de pipeline para meus próprios projetos em produção, não é algo que estou descobrindo com seu dinheiro.

Uma coisa antes de você me mandar mensagem. Eu só faço scraping de dados que são acessíveis publicamente e mantenho as taxas de requisição educadas. Nada de burlar paywall, nem fazer scraping atrás do login de alguém.

Me diga o site, os campos que você precisa e com que frequência, e eu te digo rapidinho se dá pra fazer e por quanto.