Farei web scraping, data mining em qualquer site até 50k por dia
Desenvolvedor Python e Csharp, Guru em Data mining e Automação Web
Sobre este Serviço
Sou programador em Python/C#/PHP, vou fazer scraping ou crawling de qualquer site/diretório que tenha dados em sequência repetitiva (listagem). Tenho mais de 6 anos de experiência em tarefas de web scraping e já extraí/minerei todos os tipos de páginas, desde html simples até páginas complexas com JavaScript.
Meu serviço inclui:
- Web scraping/Data mining de qualquer site e qualquer quantidade de dados
- Coleta de dados de diretórios de negócios
- Listagem de produtos em e-commerce/woo-commerce/WordPress
- Scraping de diretórios de negócios: Para marketing digital e listagem de negócios locais
- Scraping de dados de produtos de qualquer site de e-commerce com imagens baixadas para pasta (Custos variam após análise do site).
- Automatização de tarefas manuais repetitivas
- Desenvolvimento de softwares e scripts
- Desenvolvimento de scripts personalizados com UI em C# com botões
- Scraping de sites que requerem login e resolução de captcha
- Formatos de arquivo de saída incluem csv/Excel/xls/json
Nota: Recomenda-se fortemente que entre em contato comigo antes de fazer o pedido se sua tarefa envolver alguma tarefa específica e complexa.
Tecnologia:
C#
•
Python
•
Coletor de dados instantâneo
•
NodeJS
•
selenium
Técnica:
Automatizado
Perguntas frequentes
Tradução automática
O que é Web Scraping & Data Mining?
Web scraping é o processo de extrair dados de fontes na web e estruturá-los em um formato mais conveniente. Data mining é o processo de analisar grandes conjuntos de dados para descobrir tendências e insights valiosos. Uma vez que os dados são recuperados (Web scraping), podem ser processados (Data Mining).
E se eu precisar de um volume de dados maior do que os pacotes do serviço oferecem?
Para isso, envie uma mensagem na minha inbox para discutirmos. Pode-se raspar milhões de pontos de dados, desde que você esteja disposto a dar mais tempo do que o normal nos pacotes do serviço. O custo também varia, mas quanto mais dados você precisar, menor fica o preço por unidade, então me envie uma mensagem.
Quantos pontos de dados podem ser raspados em 1 dia?
Alguns sites têm uma API oculta e outros não. Se a API estiver disponível, posso raspar dados além do limite definido nos meus pacotes em um dia. Se não houver API, com base na resposta do site, de 5.000 a 10.000 resultados podem ser raspados em 1 dia usando proxy. Lembre-se de me enviar uma mensagem para um pedido personalizado.
O que é um Proxy?
Um proxy é uma capa de invisibilidade que oculta seu IP, permitindo que você acesse os dados sem ser bloqueado. Quando usa um proxy, o site que você solicita não vê mais seu IP, mas o IP do proxy, dando a você a capacidade de fazer web scraping com maior segurança.
Quando é necessário usar um Proxy?
Um proxy ou proxies são necessários ao fazer scraping de grandes conjuntos de dados de sites, especialmente quando há captcha no site. Usamos proxies também para evitar enfrentar o captcha.
Você consegue fazer scraping de sites que requerem login, JavaScript, ReCAPTCHA ou IP bloqueado?
Sim. Se os sites exigirem login, uso módulos de login automático para lidar com isso, além de fingerprint de navegador e rotação de IP de proxy para contornar ou evitar bloqueios de IP e ReCAPTCHA, se o site tiver.
O que é Fingerprint de Navegador?
Fingerprinting de navegador é uma terceira forma de rastreamento de usuário, após cookies e supercookies. É iniciado por sites que analisam as requisições enviadas pelos clientes HTTP para identificar de forma única uma máquina, coletando uma impressão digital digital. Imitamos esse comportamento para evitar bloqueios.
Onde encontrar proxies?
Existem diversos serviços online que oferecem proxies IP para aluguel por um preço muito baixo. Assim que você me enviar uma mensagem, compartilharei alguns dos mais baratos e eficientes disponíveis.
Por que preciso me contactar comigo antes de fazer seu pedido?
Existem vários tipos de sites, como carregamento dinâmico (Javascript/AJAX) e carregamento estático, segurança ReCAPTCHA, captcha de texto, etc., que usam alta segurança. Precisamos discutir precauções e garantir 100% de certeza para que você não fique desmotivado ao usar meus serviços. Importante para novos compradores.
16 avaliações deste Serviço
| (16) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Recomendar a um amigo
- Serviço conforme a descrição
Ordenar por
L luisbanuelos315
Cliente recorrente

Estados Unidos
Great experience! Very professional, quick to respond, and easy to work with. Delivered exactly what I needed and went above and beyond. Highly recommend!
US$ 50-US$ 100
Preço
6 dias
Tempo
D 
Resposta do freelancer
Útil?A adr331
Cliente recorrente

Canadá
Amazing work Will hire again
US$ 200-US$ 400
Preço
4 semanas
Tempo
D 
Resposta do freelancer
Útil?A adr331
Cliente recorrente

Canadá
this was amazing, will hire again.
US$ 50-US$ 100
Preço
6 dias
Tempo
D 
Resposta do freelancer
Útil?A adr331
Cliente recorrente

Canadá
Amazing 10:10 Long term project going great!
US$ 50-US$ 100
Preço
2 dias
Tempo
D 
Resposta do freelancer
Útil?S stephenpark

Reino Unido
very good.
US$ 100-US$ 200
Preço
11 dias
Tempo
D 
Resposta do freelancer
Útil?
16 avaliações deste Serviço
| (16) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Recomendar a um amigo
- Serviço conforme a descrição
Ordenar por
L luisbanuelos315
Cliente recorrente

Estados Unidos
Great experience! Very professional, quick to respond, and easy to work with. Delivered exactly what I needed and went above and beyond. Highly recommend!
US$ 50-US$ 100
Preço
6 dias
Tempo
D 
Resposta do freelancer
Útil?A adr331
Cliente recorrente

Canadá
Amazing work Will hire again
US$ 200-US$ 400
Preço
4 semanas
Tempo
D 
Resposta do freelancer
Útil?A adr331
Cliente recorrente

Canadá
this was amazing, will hire again.
US$ 50-US$ 100
Preço
6 dias
Tempo
D 
Resposta do freelancer
Útil?A adr331
Cliente recorrente

Canadá
Amazing 10:10 Long term project going great!
US$ 50-US$ 100
Preço
2 dias
Tempo
D 
Resposta do freelancer
Útil?S stephenpark

Reino Unido
very good.
US$ 100-US$ 200
Preço
11 dias
Tempo
D 
Resposta do freelancer
Útil?

