Eu vou extrair dados de um site público para um arquivo Excel ou csv
Limpeza de dados, web scraping e automação
Sobre este Serviço
Me diga qual site público e quais campos você precisa, e eu entrego em um XLSX e CSV limpos.
Cada linha mantém sua URL de origem e o horário em que foi coletada, assim você pode conferir qualquer valor na página ao vivo. Removo duplicatas, verifico por campos vazios e adiciono uma aba de resumo. Meus scripts enviam uma requisição de cada vez com uma pausa, para o site nunca ficar sobrecarregado.
No meu exemplo, coletei 500 produtos em 44 categorias, sem duplicatas ou vazios. Está no meu portfólio.
O que eu não faço: sites que exigem login, dados pessoais de indivíduos (nomes com emails ou telefones), ou qualquer coisa que as regras do site claramente proíbam. Me envie a URL primeiro e vou te dizer honestamente se dá pra fazer e qual o custo. Trabalho em inglês e francês.
Tecnologia:
Python
•
Excel
•
Beautiful Soup
•
dramaturgo
•
Pandas
Técnica:
Automatizado
Perguntas frequentes
Tradução automática
O web scraping é legal?
Coletar dados públicos, não pessoais, de forma educada é tranquilo na maioria dos lugares. Primeiro verifico as regras do site e o arquivo robots, nunca faço scraping atrás de login, e não coleto dados pessoais de indivíduos. Se um site for proibido, te aviso antes de você pagar.
Você consegue extrair dados de um site que precisa de login ou tem captcha?
Não. Trabalho apenas com páginas que qualquer pessoa pode abrir sem conta, e não bypasso captchas ou barreiras anti-bot. Se os dados estiverem disponíveis por uma API oficial ou exportação, uso essa alternativa e te aviso.
E se alguns valores estiverem errados ou faltando?
Cada linha tem sua URL de origem, então você pode me indicar a página exata. Corrijo a extração e refaço no mesmo dia. Revisões são ilimitadas até o arquivo corresponder ao site.

