Cyber Database con Big Data en Aws

Utilizando tecnología de Big Data de aws, el objetivo de este proyecto es implementar la infraestructura necesaria en aws para poder procesar y relacionar una serie de datasets. El objetivo es que se puedan realizar diferentes tipos de consultas sobre los datos ya procesados y relacionados. Para ello se ha diseñado una base de datos relacionada con algunas tablas grandes de (4.000.000.000 y 300.00.00 entradas respectivamente).


Habría que descargar una serie de Datasets de forma periódica, y procesar estos para formar una base de datos relacionada actualizada. Habrá algún dataset que será proporcionado por mí y no haya que descargarlo de internet. Los datasets más grandes pueden llegar a tener hasta 20GB de tamaño en formato comprimido.
Debe de ser posible realizar consultas tanto en los datasets descargados como en la base de datos relacionada.

Ya se encuentra detallado cuales son todos los datasets, de donde descargarlos y que información de cada uno de ellos hay que almacenar en la base de datos relacionada y en que lugar. También está definido cuales serán las relaciones entre las tablas. Tambien hay definidas una serie de consultas de ejemplo que se deben de poder hacer en la base de datos.