Procesamiento de lenguajes / Java

La idea del proyecto consiste en ver como funciona un compilador.
Instrucciones
Si no posee una cuenta en Github, crear una.
Crear un fork de https://xxxxxxx. En el nuevo repositorio (que está asociado a su cuenta) es en el que trabajará.
Implementar un componente en xxxxxx que procese el código fuente y genere la lista de tokens asociados.
Incluya tres tests que procesen código fuente correcto y dos tests que procesen código incorrecto.
Los tokens detectados deben ser escritos en un archivo en disco.
Escriba una breve informe explicando qué técnicas utilizó para la implementación.