Especialista em webcrawler

Sobre este proyecto

Abierto

Estamos procurando um especialista em WebCrawler para desenvolver uma solução automatizada capaz de acessar informações de diferentes sites, incluindo aqueles protegidos por captcha. A ferramenta deverá ser capaz de coletar dados estruturados, integrá-los às bases de dados internas e automatizar o processo de coleta de informações periodicamente.

O projeto envolve o desenvolvimento de um WebCrawler com capacidade para se adaptar a diferentes padrões de páginas web, garantindo que o conteúdo seja coletado de forma eficaz. Estamos abertos à utilização de IA para lidar com captchas e melhorar a eficiência do crawler.

Contexto general del proyecto

A aplicação do WebCrawler será usada para obter informações de websites públicos e permitir um melhor aproveitamento dos dados coletados para fins internos. Já possuímos uma infraestrutura de banco de dados que irá armazenar as informações, e estamos buscando uma solução escalável que possa ser integrada a outros sistemas. Idealmente, o profissional deverá ter experiência em: - Desenvolvimento de crawlers usando tecnologias como Node.js ou Python; - Resolução de captchas, usando ferramentas como Anticaptcha ou IA; - Integração de crawlers com bancos de dados relacionais (ex: MongoDB); - Práticas de boa manutenção de código e documentação. Estamos à procura de um profissional comprometido e com disponibilidade para concluir o projeto em tempo hábil. Se você tem experiência em projetos semelhantes e gosta de desafios, por favor, entre em contato!

Categoría Programación y Tecnología
Subcategoría Programación Web
¿Es un proyecto o una posición? Un proyecto
Actualmente tengo No aplica
Disponibilidad requerida A tiempo parcial
Integraciones de API Otros (Otras APIs)
Roles necesarios Programador

Duración del proyecto Más de 6 meses

Habilidades necesarias

API Node.js Python MongoDB

Sobre este proyecto

it-programming / web-development

Abierto

Otros proyectos publicados por H. C.