Open CZP686 opened 10 months ago
想问一下如果以API方式部署ChatGLM-6B模型,那么API的最大连接数是多少呢?
目前接了3个项目还能够跑
No response
Is your feature request related to a problem? Please describe.
想问一下如果以API方式部署ChatGLM-6B模型,那么API的最大连接数是多少呢?
Solutions
目前接了3个项目还能够跑
Additional context
No response