chatchat-space / Langchain-Chatchat

Langchain-Chatchat(原Langchain-ChatGLM)基于 Langchain 与 ChatGLM, Qwen 与 Llama 等语言模型的 RAG 与 Agent 应用 | Langchain-Chatchat (formerly langchain-ChatGLM), local knowledge based LLM (like ChatGLM, Qwen and Llama) RAG and Agent app with langchain
Apache License 2.0
31.42k stars 5.48k forks source link

[BUG] 添加文件至向量库失败 #4054

Closed zhouliangjun closed 4 months ago

zhouliangjun commented 4 months ago

添加文件至向量库失败

在创建知识库页面,上传一个word文档,文档内是文字,上传成功后,点击添加文件到知识库,日志报错 图片 图片 文件已经上传至服务器目录,也能正常下载文件,但是没有能够添加到向量库当中,应该是读取文件的时候出错

zhouliangjun commented 4 months ago

提示 pickle data was truncated

zhouliangjun commented 4 months ago

原来是在 pickle.load 这个文件时出错了/nltk_data/taggers/averaged_perceptron_tagger/averaged_perceptron_tagger.pickle,把nltk_data删除重新下载之后就好了