gaogaotiantian / biliscope

Bilibili chrome extension to show uploader's stats
MIT License
594 stars 46 forks source link

分词优化:将UP主名字作为一个完整的词加入词库 #62

Open ljhcage opened 1 year ago

ljhcage commented 1 year ago

有很多UP主的名字很容易被拆散成多个词,建议在分词时将当前UP主的名字加入词库避免被拆散

gaogaotiantian commented 1 year ago

很遗憾的是,分词本身是不受控的,是浏览器功能,没办法给词库。

ljhcage commented 1 year ago

那在输入分词器前,把描述和标题中UP主的名字用引号引起来,会不会让分词器更好地识别UP主的名字

ljhcage commented 1 year ago

那在输入分词器前,把描述和标题中UP主的名字用引号引起来,会不会让分词器更好地识别UP主的名字

简单验证了一下,中英文引号,空格,均无法动摇分词器的结果 -_-||

F-park commented 10 months ago

解决方案

[!TIP] up 主的名字可以通过 UserProfileCard 里的 this.data["name"] 获取到

在分词前把 up 主的名字剪切出来,直接按权重加到 wordMap 里。