Evaluando propuestas

Extração de dados de uma página, com pausa e continuação de onde parou

Publicado el 10 Octubre, 2022 en Programación y Tecnología

Sobre este proyecto

Abierto

Estou querendo extrair dados de um site. Porém para extrair todos,  tenho que fazer por etapas, 1000 por vez por exemplo. Logo depois da extração, teria que pausar e salvar os dados para que na próxima extração, continuasse de onde parou. Pois se voltar do começo, o site pode bloquear a conta, pq vai carregar tudo de novo e mais a próxima extração.

Até pesquisei sobre um tal arquivo har gerado no inspector Google Chrome, mas não consegui colocar pra funcionar.

Uma ideia simples que tive foi de acessar os os dados e ir descendo a página para carregar mais até certo momento, por exemplo até 1000. A partir daí extraio esses carregados e continuo no outro dia, sem recarregar a página, pois se recarregar, volta tudo do começo.

Desvantagem: computador de tem ficar ligado 24h e não posso recarregar a página.

Contexto general del proyecto

Extração de dados pausando e retomando de onde parou.

Categoría Programación y Tecnología
Subcategoría Otros
Tamaño del proyecto Medio
¿Es un proyecto o una posición? Un proyecto
Actualmente tengo No aplica
Disponibilidad requerida Según se necesite

Plazo de Entrega: No definido

Habilidades necesarias

HTML5 MySQL PHP Administrador de Redes Programación de Redes Python Instagram

¿Te gustaría comenzar a trabajar en este proyecto?

Ingresa con tu cuenta de Workana o Regístrate. ¡Potencia tu trabajo freelance!

Otros proyectos publicados por Mário G. F.