search

mayabot / mynlp

一个生产级、高性能、模块化、可扩展的中文NLP工具包。（中文分词、平均感知机、fastText、拼音、新词发现、分词纠错、BM25、人名识别、命名实体、自定义词典）
https://mynlp.mayabot.com/
Apache License 2.0
675 stars 90 forks source link

加载压缩模型会导致报错 #34

Closed saberwangcn closed 3 years ago

saberwangcn commented 3 years ago

当用此库加载压缩后的fasttext模型后，进行预测会导致数据越界错误。原因是加载词典一处代码的顺序问题，导致加载的词的hashId被错误记录。修复已经提交，简单修改代码顺序即可。