649453932 / Chinese-Text-Classification-Pytorch

中文文本分类,TextCNN,TextRNN,FastText,TextRCNN,BiLSTM_Attention,DPCNN,Transformer,基于pytorch,开箱即用。
MIT License
5.19k stars 1.22k forks source link

word-level是不是有点问题 #77

Open Josiahhx opened 2 years ago

Josiahhx commented 2 years ago

为什么word-level的正确率非常低,我已经对原始数据用jieba进行了分词处理,有大佬知道为什么吗

li199603 commented 2 years ago

看起来好像这里给的预训练embedding里只有字向量

li199603 commented 2 years ago

你可以看一下utils.py里最后的代码。作者是把别人提供的预训练字和词向量只提取出需要的部分。你可以按照这个方法把词向量提取出来用

maoyuejingxian commented 11 months ago

为什么word-level的正确率非常低,我已经对原始数据用jieba进行了分词处理,有大佬知道为什么吗

你好,我也是分词了之后准确率特别低,这是为什么你弄清楚了吗