OpenAI 接口管理 & 分发系统,支持 Azure、Anthropic Claude、Google PaLM 2 & Gemini、智谱 ChatGLM、百度文心一言、讯飞星火认知、阿里通义千问、360 智脑以及腾讯混元,可用于二次分发管理 key,仅单可执行文件,已打包好 Docker 镜像,一键部署,开箱即用. OpenAI key management & redistribution system, using a single API for all LLMs, and features an English UI.
例行检查
功能描述
Rerank 已经成为了 RAG 的重要组件。
Cohere 提供了搜索精排的接口 https://docs.cohere.com/reference/rerank-1, Hugging Face 的 Text Embeddings Interface https://huggingface.github.io/text-embeddings-inference/#/Text%20Embeddings%20Inference/rerank 是一个本地高效部署 Rerank 模型的框架。
二者的 rerank API 不相同。 希望本项目能增加对 rerank API 的支持,统一这两种模式的 API。