Ver categorias
Explorar
Fiverr Pro
Português
$
USD
Farei web scraping, extração de dados, mineração de dados e construirei um scraper em python
Engenheiro de API Backend, Python, Integrações, Dados
Conecto sistemas que nunca foram feitos para conversar entre si.
Anos de software de produção, a maior parte em backends Python, integração de API e pipelines de dados. Escrevi clientes para serviços...
Sobre este Serviço
Você precisa de dados que estão em um site, dentro de um painel ou escondidos em uma pilha de PDFs. Eu transformo isso em uma tabela limpa que você pode usar.
O QUE EU FAÇO
- Web scraping de sites atrás de login, com paginação ou scroll infinito
- Páginas renderizadas totalmente em JavaScript
- Extração de dados de PDFs, faturas e documentos digitalizados
- Listas de geração de leads criadas a partir de diretórios e mapas
- Fontes que mudam layout e continuam quebrando o script que você já tem
O QUE VOCÊ RECEBE
- CSV, Excel, JSON ou carga direta no seu banco de dados
- Dados deduplicados e normalizados, com campos nomeados do jeito que você pediu
- O código fonte do seu scraper em python, assim você nunca fica dependente de mim
- No pacote Premium: uma tarefa agendada e um alerta assim que a fonte mudar
COMO FUNCIONA
Envie a URL e um exemplo do resultado que deseja. Eu verifico a fonte e confirmo o escopo e o preço antes de você fazer qualquer pedido.
O QUE NÃO FAÇO
Não bypass de controles de acesso, não coleta de dados pessoais protegidos, não scraping de plataformas sociais para revenda de dados de usuários.
Me diga a fonte e os campos que precisa. Em um dia, você saberá se é simples ou complicado.
Tecnologia:
Python
•
scrapy
•
selenium
•
Beautiful Soup
•
dramaturgo
Técnica:
Automatizado
Perguntas frequentes
Tradução automática
O site bloqueia bots. Ainda assim, você consegue pegar os dados?
Frequentemente sim, sempre dentro das regras: respeitando limites de taxa e agindo como um usuário normal. O que não faço é burlar proteções ou controles de acesso.
Com que frequência o scraper pode rodar?
De tudo, de uma vez a cada poucos minutos, dependendo do comportamento da fonte. Agendamento está incluso no pacote Premium.
O que acontece quando o site muda e quebra?
É para isso que serve o alerta. Você ouve de mim, não de uma planilha vazia três semanas depois.
Você consegue carregar direto no nosso banco de dados?
Sim. PostgreSQL, MySQL, Google Sheets, Airtable ou um bucket S3.
Vou receber o código?
Sim, a partir do pacote Padrão em diante. É seu script e você pode rodá-lo sem minha ajuda.
Você faz extração de dados de PDFs e documentos digitalizados?
Sim. PDFs de texto são simples, digitalizações precisam de OCR e eu te digo a precisão realista antes de você pedir.
Você faz listas de geração de leads?
Sim, de diretórios públicos de negócios e mapas, com os campos que você precisa. Não vendo listas de dados pessoais já prontas.
Como posso saber se os dados estão completos?
Cada entrega inclui uma contagem de linhas comparada com a fonte e uma nota sobre qualquer coisa que não pôde ser recuperada e o motivo.
