Analisando propostas

Sistema p/ raspar dados (crawler) de sites. título, descrições, imagens.

Publicado em 24 de Maio de 2017 dias na TI e Programação

Sobre este projeto

Aberto

Necessito de um desenvolvedor com experiência em crawler, raspagem de dados na internet, para insertar os dados em banco de dados mysql.  Serão pre-definidos entre 5 a 10 sites (lojas virtuais) para o sistemas raspar. Pode ser realizado em php ou preferência de bibllioteca python ou similar que consiga fazer um trabalho de busca por produtos em lotes.
O sistema tem que fazer o scraper, com base no código EAN ou Nome do produto, nesta ordem de acordo com os registros disponíveis no meu banco de dados mysql e trazer para uma interface gráfica: o "título" do produto encontrado, descrição do produto, categoria que o mesmo está inserido e imagens. Mostrar após o scraper, a lista com os resultados. Estes campos devem poder ser editados para uma "rebusca" (ter um botão individual por registro), para raspar um próximo registro da informação antes de salvar novamente no banco de dados.
Ter a função também de gerar um arquivo csv ou xls com resultados em campos (o layout da planilha e colunas devem ter a liberdade de ser configuráveis).

Apenas desenvolvedor que já tem experiência em crawler e raspagem de dados em massa.

Categoria TI e Programação
Subcategoria Programação
Qual é o alcance do projeto? Alteração média
Isso é um projeto ou uma posição de trabalho? Um projeto
Tenho, atualmente Eu tenho especificações
Disponibilidade requerida Conforme necessário
Experiência nesse tipo de projeto Não (Eu nunca gerenciei esse tipo de projeto)
Funções necessárias Desenvolvedor

Prazo de Entrega: 08 de Junho de 2017

Habilidades necessárias

Outro projetos publicados por J. F.