Sobre este projeto
it-programming / web-development
Aberto
Procuramos um especialista para desenvolver uma solução de automação de web scraping. O objetivo principal é coletar dados específicos de websites e organizá-los de forma estruturada em um banco de dados ou planilha.
As responsabilidades incluem:
* Análise e identificação das melhores estratégias para coleta de dados em diferentes plataformas web.
* Desenvolvimento de scripts robustos e eficientes para web scraping.
* Implementação de mecanismos para lidar com anti-scraping e rotação de IPs, se necessário.
* Estruturação e armazenamento dos dados coletados em um formato acessível (ex: MySQL, PostgreSQL, MongoDB, ou planilhas como Excel/Google Sheets).
* Garantir a qualidade e a integridade dos dados.
* Fornecer a documentação necessária para a manutenção da automação.
O projeto requer um profissional com experiência comprovada em web scraping e manipulação de dados. A solução deve ser escalável e de fácil manutenção. Detalhes sobre os websites específicos e o volume de dados serão discutidos durante o processo de seleção.
Categoria TI e Programação
Subcategoria Programação
Qual é o alcance do projeto? Criar um novo site personalizado
Prazo de Entrega: Não estabelecido
Habilidades necessárias