search

dccuchile / beto

BETO - Spanish version of the BERT model
Creative Commons Attribution 4.0 International
492 stars 63 forks source link

Gestionar [UNK] #9

Closed Javier-Jimenez99 closed 3 years ago

Javier-Jimenez99 commented 4 years ago

He diseñado un modelo Bert para resolver NER basado en su modelo, pero me gustaría saber como revertir los valores que tienen los tokens de [UNK]. Es decir obtener el valor real que tiene en la frase el token que contiene esta etiqueta.

Esto se debe a que a veces se detectan entidades a las que se les asigna esta etiqueta y no puedo saber de cuál es su nombre.

josecannete commented 3 years ago

Hola @Javier-Jimenez99,

Puedes encontrar información al respecto en la librería Transformers.

Saludos!