search

macanv / BERT-BiLSTM-CRF-NER

Tensorflow solution of NER task Using BiLSTM-CRF model with Google BERT Fine-tuning And private Server services
https://github.com/macanv/BERT-BiLSMT-CRF-NER
4.69k stars 1.25k forks source link

英文预测标签中含X #256

Closed littletomato closed 4 years ago

littletomato commented 4 years ago

如题，用bert英文在英文数据集上训练，最后标签中含有X怎么解决？有大佬知道吗？ image

macanv commented 4 years ago

X只是一个符号罢了，你改一下代码不就OK了？

littletomato commented 4 years ago

是把标签X去掉吗？ 然后把bert_lstm_ner.py中的 image 改成 image 这样吗？

macanv commented 4 years ago

X是用来做wordpice的时候，切分问题添加的label，这样改一版也不会出现什么问题，不过不是很推荐，你可以把X改成任意一个你数据集里没有的符号例如XX。然后，在label set处，做相应修改即可。