Open yanggeng1995 opened 5 years ago
您好,我在使用这个工具的过程中,发现有些自定义的分词不起作用,比如这句话: "最近,勇士老将伊戈达拉道出了实情!", 分词结果是 "勇士/老将/伊戈达拉道/出了/实情", 我自定了“道出了”, 但是貌似分词并没有起作用,结果还是将“伊戈达拉道”分成了一个词。请问这是什么原因?谢谢~
貌似是因为你们训练数据的“伊戈达拉道”是个人名? 但是我理解自定义的分词词典的优先级应该会比其他高吧?
您好,我在使用这个工具的过程中,发现有些自定义的分词不起作用,比如这句话: "最近,勇士老将伊戈达拉道出了实情!", 分词结果是 "勇士/老将/伊戈达拉道/出了/实情", 我自定了“道出了”, 但是貌似分词并没有起作用,结果还是将“伊戈达拉道”分成了一个词。请问这是什么原因?谢谢~