Robo pegando dados do site e levando para planilha em excel

Payment method: Verified


Evaluating bids
Description:
Necessito de um robô para a extração de dados de um site.

O site tem uma proteção para evitar este tipo de operação. Se vierem muitas requisições de um mesmo IP, o site corta o acesso.

O robô deverá simular requisições de vários IP's para que o site não detecte que se trata da mesma origem. Pode acessar/simular um proxy e acessar o site a partir deste proxy (uma ideia), ou a cada instância acessar com um novo IP gerado automaticamente. Não sei qual a melhor estratégia.


Deverá ter várias instâncias (podem ser configuráveis) rodando simultaneamente, fazendo requisições e recuperando os dados. Estas instâncias devem ser finalizadas a cada X segundos ou a cada X requisições e criada uma nova no lugar, sempre com um novo IP.

Não existe um captcha no site.

Os dados capturados em cada requisição devem ser gravados em um arquivo em excel, em um formato previamente definido.

Desenvolvido preferencialmente em C#, mas pode ser outra linguagem.

Category: IT & Programming
Subcategory: Web development
What is the scope of the project?: Medium-sized change
Is this a project or a position?: Project
I currently have: I have specifications
Required availability: As needed
API Integrations: Other (Other APIs), Cloud Storage (Dropbox, Google Drive, etc.), Payment Processor (Paypal, Stripe, etc.)
Roles needed: Developer

USD 50 - 100

Budget

9

Bids

19

Interested freelancers

Published: 7 months ago

Deadline: 2 days

Create your own project

Are you looking for a freelancer to work on a similar project? Create your own project and you’ll receive proposals from the best freelancers.


Freelancers who already applied to this project

Cláudio H.Olá, Meu nome é Cláudio, tenho 25 anos e sou desenvolvedor, minhas habilidades são voltadas para o desenvolvimento de aplicações web/mobile. - PHP - Laravel - Java para Android - MySQL - HTML5 - JavaScript ... More details

Edilson S.Experiência de mais de 10 anos em desenvolvimento de soluções web. Desenvolvedor de web crawlers/scrapers, utilizando as linguagens PHP, Python/Scrapy/Selenium. Desenvolvimento de scrapers para sites de apostas, co... More details