danielsp13 / CorrectIt

CorrectIt: un corrector de exámenes escritos en lenguaje natural.
GNU General Public License v3.0
0 stars 0 forks source link

[M1 - Dev] Refactorizar implementación de obtención de Tokens de una Respuesta #52

Closed danielsp13 closed 1 year ago

danielsp13 commented 1 year ago

En #41 se plantea el problema de la reducción de la dimensión de un texto escrito en lenguaje natural mediante la obtención de tokens. Sin embargo, la implementación de esta funcionalidad, no debe contener llamadas a funciones que dependan de bibliotecas externas (NLTK y muy posiblemente, unidecode), tal y como se ha comentado en #31 .

Debe solucionarse la tokenización de una respusta con código propio, y debe verificar los resultados propuestos.