OpenAI 接口管理 & 分发系统,支持 Azure、Anthropic Claude、Google PaLM 2 & Gemini、智谱 ChatGLM、百度文心一言、讯飞星火认知、阿里通义千问、360 智脑以及腾讯混元,可用于二次分发管理 key,仅单可执行文件,已打包好 Docker 镜像,一键部署,开箱即用. OpenAI key management & redistribution system, using a single API for all LLMs, and features an English UI.
例行检查
问题描述 具体原因是因为我在添加zhipu渠道后,通过流的方式返回出现了问题,但是非流方式是可以返回的。
这块出现的问题就是在使用OpenAI官方的sdk的时候流的方式直接是about状态。
经过抓包分析后发现,他和openai的chunk结构不太一样,希望大佬可以修复一下这个BUG
复现步骤
预期结果
希望流的方式可以返回内容
相关截图 如果没有的话,请删除此节。