Analisando propostas

Web Scraping para monitoramento + Desenvolvimento de front-end

Publicado em 14 de Fevereiro de 2025 dias na TI e Programação

Sobre este projeto

Aberto

Estamos em busca de um desenvolvedor especializado em web scraping e automação de processos para criar um sistema que monitore licitações governamentais em sites como ComprasNet. O objetivo é extrair dados relevantes de forma recorrente e centralizar essas informações em uma plataforma web (front-end simples), além de enviar notificações automatizadas para WhatsApp e e-mail.

Principais Tarefas

✅ Desenvolvimento do Web Scraping:
    •    Criar um script para extração recorrente de informações dos portais de compras governamentais.
    •    Quebrar CAPTCHAs, caso necessário, garantindo a automação completa do processo.
    •    Extrair dados do chat do pregão (onde o pregoeiro publica atualizações e mensagens).
    •    Extrair dados do quadro informativo da licitação (detalhes gerais, status e atualizações).

✅ Desenvolvimento do Painel Web (Front-end e Back-end):
    •    Criar uma página web onde o usuário possa cadastrar licitações que deseja monitorar.
    •    Implementar filtros de CNPJ para monitoramento específico de licitações relacionadas à empresa.
    •    Exibir de forma organizada todas as informações coletadas pelo scraper.

✅ Integração e Notificações Automáticas:
    •    Integrar o sistema ao banco de dados para armazenamento das informações extraídas.
    •    Implementar envio automático de notificações por WhatsApp e e-mail para cada atualização nas licitações monitoradas.
    •    Garantir que o sistema funcione de maneira escalável e eficiente para processar diversas licitações simultaneamente.

Requisitos Técnicos

🔹 Experiência comprovada em web scraping.
🔹 Conhecimento avançado em Python ou JavaScript para automação de tarefas.
🔹 Familiaridade com quebra de CAPTCHAs
🔹 Habilidade em desenvolvimento web (Front-end + Back-end) para criação do painel de monitoramento.

Entrega e Condições

✔️ Entrega do código-fonte bem documentado e de fácil manutenção.
✔️ Demonstração do sistema funcionando com exemplos reais de licitações monitoradas.
✔️ Definição de prazos e condições de pagamento com etapas de validação do projeto.
✔️ Disponibilidade para reuniões e acompanhamento do desenvolvimento.

Contexto Geral do Projeto

Busque exemplos de licitações aqui: https://cnetmobile.estaleiro.serpro.gov.br/comprasnet-web/public/compras Nós temos todos os arquivos do front-end definitivo no Figma para te ajudar. Anexei uma imagem mostrando onde precisamos desse monitoramento. Esse projeto é a versão inicial para nos apoiar em nosso trabalho. Precisaremos de atualizações e adicições de novas funcionalidades (já estão em escopo para produção), então procuramos alguém que nos acompanhe nessa jornada de desenvolvimento.

Categoria TI e Programação
Subcategoria Programação
Qual é o alcance do projeto? Criar um novo site personalizado
Isso é um projeto ou uma posição de trabalho? Um projeto
Tenho, atualmente Eu tenho o design
Disponibilidade requerida Conforme necessário
Funções necessárias Desenvolvedor

Prazo de Entrega: 10 de Março de 2025

Habilidades necessárias