Dự đoán sai khi gặp từ đồng âm

[vunt-0906]

Ví dụ:

Một cậu bé bò cạnh một con bò.

Post tagging sẽ là:

(['Một', 'cậu', 'bé', 'bò', 'cạnh', 'một', 'con', 'bò', '.'], ['M', 'Nc', 'N', 'N', 'N', 'M', 'Nc', 'N', 'F'])

Và một vài ví dụ khác:

"Chiếc xe chạy băng băng trên đường"
=> ['Chiếc', 'xe', 'chạy', 'băng', 'băng', 'trên', 'đường'], ['Nc', 'N', 'V', 'V', 'N', 'E', 'N']

[trungtv]

Chào em, hình như em chưa chạy tokenizer trước phải không?

[vunt-0906]

E chạy tokenizer trước rồi ạ.

from pyvi import ViTokenizer, ViPosTagger, ViUtils
data = ViTokenizer.tokenize(u"Một cậu bé bò cạnh một con bò.")
test = ViPosTagger.postagging(data)
print(test)