Aplicação de Web Scraping

Project overview

Objetivos Específicos: 1. Automação de Coleta de Dados o Implementar um mecanismo eficiente para extrair informações detalhadas das licitações, incluindo título, descrição, objeto, número do edital, órgão responsável, datas de abertura e encerramento, modalidades, e demais campos relevantes. 2. Organização e Armazenamento o Estruturar os dados coletados em um banco de dados relacional (como PostgreSQL ou MySQL) para garantir fácil consulta e integração com outras ferramentas de análise. 3. Monitoramento e Atualização Contínua o Configurar o sistema para realizar atualizações periódicas nos dados coletados, verificando automaticamente novas publicações e alterações das publicações existentes. 4. Interface de Consulta o Criar uma interface amigável (dashboard) que permita ao usuário acessar e filtrar os dados de forma intuitiva. 5. Compliance e Ética o Garantir que o processo de coleta esteja em conformidade com as políticas de uso do portal e respeite as boas práticas de web scraping.

Category IT & Programming
Subcategory Web development
What is the scope of the project? Medium-sized change
Is this a project or a position? Project
I currently have I have an idea
Required availability As needed
Roles needed Developer

Delivery term: Not specified

Skills needed