Analisando propostas

Projeto: Scraping com Login + Mini Portal + Rag com Postgresql + Qdrant (Docker)

Publicado em 09 de Maio de 2025 dias na TI e Programação

Sobre este projeto

Aberto

Desenvolver a primeira fase de uma solução de IA com foco em:
Scraping de páginas protegidas por login/senha
Mini portal web para acompanhamento e sincronização
Armazenamento em dois bancos:
PostgreSQL com dados brutos
Qdrant com embeddings vetoriais para ser utilizado em agentes de IA

Contexto Geral do Projeto

🔐 1. Scraping com Autenticação Acesso a páginas com login e senha Sessão persistente ou reautenticação automática Extração estruturada (número da FAQ, pergunta, resposta, link, etc.) Armazenamento no banco relacional (PostgreSQL) 🌐 2. Mini Portal Web Interface simples com login Visualização e acompanhamento dos dados coletados Upload manual de documentos (pdf, docx, etc.) Sincronização com base vetorial (Qdrant) Indicação do status de indexação 🧠 3. Armazenamento Vetorial e RAG Geração de embeddings com modelo adequado Armazenamento no Qdrant, com metadados Endpoint de consulta com RAG Retorno inteligente baseado em similaridade semântica 🐳 4. Requisito Obrigatório: Docker Todo o projeto deve ser empacotado com Docker Compose Separação de serviços (scraper, API, portal, banco, vetorial) Facilidade para replicar localmente ou em VPS (Docker Swarm é um bônus) ✅ Tecnologias Recomendadas Python (preferencial) ou Node.js PostgreSQL + Qdrant LangChain, LlamaIndex ou outra lib de RAG FastAPI, Flask ou Express Docker + Docker Compose 📦 Entregáveis Código-fonte organizado Arquivos Dockerfile e docker-compose.yml completos Mini portal funcional Scripts de scraping com autenticação RAG operacional com base no Qdrant

Categoria TI e Programação
Subcategoria Programação
Qual é o alcance do projeto? Alteração média
Isso é um projeto ou uma posição de trabalho? Um projeto
Tenho, atualmente Eu tenho especificações
Disponibilidade requerida Conforme necessário
Funções necessárias Desenvolvedor

Prazo de Entrega: Não estabelecido

Habilidades necessárias

Outro projetos publicados por A. D.