search

infinilabs / analysis-ik

🚌 The IK Analysis plugin integrates Lucene IK analyzer into Elasticsearch and OpenSearch, support customized dictionary.
Apache License 2.0
16.49k stars 3.27k forks source link

ik_smart分词问题请教 #988

Open cumtxzy opened 1 year ago

cumtxzy commented 1 year ago

使用ik_smart分词，“语文老师”会被分成“语文”和“老师”，但是“数学老师”只会分“数学老师”，请问这是基于什么考虑？（ik版本7.7.1）

kin122 commented 1 month ago

smart算法有一定的随机性，它只是挑了一组不重复且内部评分最高的词元组