Aplicação de Web Scraping

Contexto Geral do Projeto

Objetivos Específicos: 1. Automação de Coleta de Dados o Implementar um mecanismo eficiente para extrair informações detalhadas das licitações, incluindo título, descrição, objeto, número do edital, órgão responsável, datas de abertura e encerramento, modalidades, e demais campos relevantes. 2. Organização e Armazenamento o Estruturar os dados coletados em um banco de dados relacional (como PostgreSQL ou MySQL) para garantir fácil consulta e integração com outras ferramentas de análise. 3. Monitoramento e Atualização Contínua o Configurar o sistema para realizar atualizações periódicas nos dados coletados, verificando automaticamente novas publicações e alterações das publicações existentes. 4. Interface de Consulta o Criar uma interface amigável (dashboard) que permita ao usuário acessar e filtrar os dados de forma intuitiva. 5. Compliance e Ética o Garantir que o processo de coleta esteja em conformidade com as políticas de uso do portal e respeite as boas práticas de web scraping.

Categoria TI e Programação
Subcategoria Programação
Qual é o alcance do projeto? Alteração média
Isso é um projeto ou uma posição de trabalho? Um projeto
Tenho, atualmente Eu tenho uma ideia geral
Disponibilidade requerida Conforme necessário
Funções necessárias Desenvolvedor

Prazo de Entrega: Não estabelecido

Habilidades necessárias