Vou construir rastreador e scraper de web escaláveis

Algumas informações foram traduzidas automaticamente.

Índia

Eu falo Inglês

72 pedidos finalizados

Engenheiro de Big Data na Amazon com mais de 6 anos de experiência em Hadoop, Spark, PySpark, Hive e plataformas de nuvem como AWS, GCP, Azure e DataBricks. Desenvolveu e agendou pipelines de ETL de p...
Sobre este Serviço

Sou um Engenheiro de Big Data da Amazon com mais de 5 anos de experiência em coleta, modelagem e transformação de dados.

Se você quer rastrear e extrair dados de alguns sites, está a um clique de realizar isso.


Rastreamento de Web | Web Scraping | Extração de Dados | Data Mining | Coleta de Dados | Scraping de Dados


Meus Serviços (Incluindo, mas não se limitando a):

  1. Rastreamento de web - navegação por páginas, páginas com paginação/scroll para carregar mais conteúdos.
  2. Web scraping - extração de conteúdo de páginas, extração de imagens, URLs e revisitar os sites.
  3. Extração de dados de endpoints de API.
  4. Coletar dados em diferentes formatos (Planilha Excel, CSV, XML, JSON, MySql, Parquet, ORC, etc).
  5. Rastrear e extrair dados de qualquer site, incluindo sites de e-commerce (Shopify, WooCommerce, etc), diretórios de negócios, etc.
  6. Baixar imagens de sites.



Tecnologia:

Python

Planilhas Google

Excel

scrapy

Beautiful Soup

Tipo de informação:

Moeda e ações

Imagens

Notícias e eventos

Técnica:

Automatizado