fxsjy / jieba

结巴中文分词
MIT License
33.39k stars 6.73k forks source link

大家散了吧!LLM的分词效果更好 #994

Closed lak02 closed 1 year ago

lak02 commented 1 year ago

而且有不少CPU就能正常运行的模型

brynne8 commented 1 year ago

但是不够轻量。我要在1C1G的服务器上运行好多多东西呢。

lak02 commented 1 year ago

但是不够轻量。我要在1C1G的服务器上运行好多多东西呢。

有256m or 512m 内存就能运行的轻量模型

mdys commented 1 year ago

@david0ffff 你好大佬 请问 LLM的分词 有具体的 github链接吗 谢谢