Web crawler scrapy e django

Sobre este projeto

Aberto

Coletar dados em website publico e alimentar uma base de dados. Os sites possuem elementos em javascript, porem nada muito complexos. A maior parte das informações a serem coletadas estão no HTML renderizado da página.

O fluxo, em alto nível, seria:
1- Efetuar login;
2-Passar pelo captcha e/ou recaptcha (usaremos serviços anti-captacha e similares);
3-Coleta os itens no padrão ScrapyItems;
4-Gravar no banco de dados;
Para mais detalhes conversaremos.

Categoria TI e Programação
Subcategoria Programação
Isso é um projeto ou uma posição de trabalho? Um projeto
Tenho, atualmente Eu tenho especificações
Disponibilidade requerida Conforme necessário
Experiência nesse tipo de projeto Sim (Eu já gerenciei esse tipo de projeto)
Funções necessárias Desenvolvedor

Prazo de Entrega: 10 de Agosto de 2020

Habilidades necessárias

MySQL Django Python

Sobre este projeto

it-programming / web-development

Aberto