Evaluating bids

Sistema p/ raspar dados (crawler) de sites. título, descrições, imagens.

Published on the May 24, 2017 in IT & Programming

About this project

Open

Necessito de um desenvolvedor com experiência em crawler, raspagem de dados na internet, para insertar os dados em banco de dados mysql.  Serão pre-definidos entre 5 a 10 sites (lojas virtuais) para o sistemas raspar. Pode ser realizado em php ou preferência de bibllioteca python ou similar que consiga fazer um trabalho de busca por produtos em lotes.
O sistema tem que fazer o scraper, com base no código EAN ou Nome do produto, nesta ordem de acordo com os registros disponíveis no meu banco de dados mysql e trazer para uma interface gráfica: o "título" do produto encontrado, descrição do produto, categoria que o mesmo está inserido e imagens. Mostrar após o scraper, a lista com os resultados. Estes campos devem poder ser editados para uma "rebusca" (ter um botão individual por registro), para raspar um próximo registro da informação antes de salvar novamente no banco de dados.
Ter a função também de gerar um arquivo csv ou xls com resultados em campos (o layout da planilha e colunas devem ter a liberdade de ser configuráveis).

Apenas desenvolvedor que já tem experiência em crawler e raspagem de dados em massa.

Category IT & Programming
Subcategory Web development
What is the scope of the project? Medium-sized change
Is this a project or a position? Project
I currently have I have specifications
Required availability As needed
Experience in this type of projects No (I haven’t managed this kind of project before)
Roles needed Developer

Delivery term: June 08, 2017

Skills needed

Other projects posted by J. F.