Evaluando propuestas

Disponibilização de base de dados

Publicado el 13 Diciembre, 2022 en Programación y Tecnología

Sobre este proyecto

Abierto

Objetivo: Otimizar o acessos às bases de dados; Temos bases com grande volume de dados tanto em relação a quantidade como também em variedade de formatos de armazenamento (pdfs, csv, json). Para se ter uma noção a Hemeroteca Política Externa Brasileira (HPEB) tem quase 30 mil notícias; o NewsCloud tem mais de 3 milhões de notícias e é atualizado diariamente; e o IRjournalsBR de mais de 4 mil artigos e é atualizado periodicamente. Precisamos melhorar o acesso a estas informações para viabilizar uma análise de dados mais aprimorada e integrada. Para isso almejamos:
(1) Criar uma API para facilitar o consumo dos dados;
(2) Integração do Júpiter Notebook com bibliotecas de lidam com grande volume de dados
## Sugestões de bibliotecas (Spark, Dask, DuckDB, Python Elasticsearch Client)

Categoría Programación y Tecnología
Subcategoría Data Science
Tamaño del proyecto Medio
¿Es un proyecto o una posición? Un proyecto
Disponibilidad requerida Según se necesite

Plazo de Entrega: No definido

Habilidades necesarias

Otros proyectos publicados por R. D. A.