Evaluating bids

Desenvolvimento de scrapper para anúncios no Viva Real

Published on the January 23, 2023 in IT & Programming

About this project

Open

Desenvolvimento de um crawler que colete informações de anúncios de imóveis no Viva Real e deposite de forma padronizada em um banco de dados Postgresql. Tanto o motor de busca quanto o banco de dados devem rodar na mesma máquina.

Especificações:
- Motor de busca: Qualquer tecnologia de scrap.
- Banco de dados de hospedagem: Postgresql.
- Estrutura da tabela de saída: uma tabela, com estrutura de campos no arquivo anexo, mais possíveis tabelas de controle.
- Ambiente: Ubuntu 22.04 LTS com Docker.
- Repositório: Github, a ser fornecido pelo contratante.
- Funcionamento: Coleta de anúncios pelo menos uma vez por semana, com cada novo ciclo substituindo completamente os anúncios do ciclo anterior.
- Parâmetros de busca e filtros: Colocar parâmetros de busca e de filtragem em um arquivo de configuração separado. O arquivo deve conter: 1) Intervalo do ciclo de busca, em dias; 2) Pares chave/valor para filtro de busca de anúncios.
- Instalação no servidor: A cargo do contratado
- Período de testes/garantia: Pelo menos duas semanas após entrega

Project overview

Estou fazendo um levantamento de anúncios de imóveis na internet, por isso a necessidade de criação de um scrapper. A tabela padrão tem que ser seguida exatamente no formato fornecido, mas a população de dados depende da disponibilidade das informações.

Category IT & Programming
Subcategory Web development
What is the scope of the project? Medium-sized change
Is this a project or a position? Project
I currently have I have specifications
Required availability As needed
Roles needed Developer

Delivery term: Not specified

Skills needed

Other projects posted by S. M.