search

chatchat-space / Langchain-Chatchat

Langchain-Chatchat（原Langchain-ChatGLM）基于 Langchain 与 ChatGLM, Qwen 与 Llama 等语言模型的 RAG 与 Agent 应用 | Langchain-Chatchat (formerly langchain-ChatGLM), local knowledge based LLM (like ChatGLM, Qwen and Llama) RAG and Agent app with langchain
Apache License 2.0
31.3k stars 5.45k forks source link

[FEATURE] 增加问题的向量化和排名靠前的本地向量模型 #3945

Closed chuanSir123 closed 3 months ago

chuanSir123 commented 4 months ago

功能描述 / Feature Description 加问题的向量化和排名靠前的本地向量模型

解决的问题 / Problem Solved 目前我用qwen-api对知识库进行向量化后，后续的提问并不会向量化（没有访问qwen-api），不清楚是怎么做到精准的向量比对和score排序的

实现建议 / Implementation Suggestions 创建知识库时把每行数据进行向量化存库，查询知识库时，先对问题进行量化，然后向量比对得出知识库数据和分数。 本地向量化模型排行：https://huggingface.co/spaces/mteb/leaderboard

zRzRzRzRzRzRzR commented 4 months ago

一次向量化之后就不会了，后续都是召回，会调用模型进行召回

chuanSir123 commented 4 months ago

召回

多谢解答，继续问下这个没有向量索引么，那一开始的一次性向量化有什么用呢（小白的理解是使用相同的模型对知识库和问题进行向量化才能够比对）

github-actions[bot] commented 3 months ago

这个问题已经被标记为 stale ，因为它已经超过 30 天没有任何活动。