Completed

Criação de um crowler para procurar anúncios de imóveis na Zap Imóveis e extrair informações dos anúncios

Published on the February 10, 2020 in IT & Programming

About this project

Open

O projeto em questão tem por objetivo criar um robô que procure e extraia informações de anúncios de imóveis rurais da Zap Imóveis, e armazene essas informações em forma estruturada em um banco de dados em nuvem.

Mais algumas informações sobre o sistema:
- O sistema precisa rodar em VM Ubuntu sem interface gráfica
- Os dados devem ser armazenados em banco de dados Postgre em servidor separado
- As imagens dos anúncios devem ser também armazenadas
- O site de fonte não tem captcha
- Deve haver verificação contra repetição (anúncios já armazenados)
- Os termos da busca devem estar registrados em arquivo TXT externo
- Deve haver um log de ações e erros no servidor para acompanhamento
- Deve ser desenvolvido preferencialmente em Python ou PHP
- A busca deve ser disparada em intervalos (dias) definidos por parâmetros em um arquivo txt externo
- Busca base em https://www.zapimoveis.com.br/venda/fazendas-sitios-chacaras/
- Informações a coletar:
    - Preço
    - Tipo
    - Tamanho
    - Endereço
    - CEP
    - Município
    - Nome de contato
    - Telefone de contato
    - URL do anúncio
    - Descrição
    - Imagens
    - Data de publicação do anúncio
    - Código (para verificação de duplicidade)

Category IT & Programming
Subcategory Web development
What is the scope of the project? Medium-sized change
Is this a project or a position? Project
I currently have I have an idea
Required availability As needed
Roles needed Developer

Delivery term: Not specified

Skills needed

Other projects posted by S. M.