thu-coai / Safety-Prompts

Chinese safety prompts for evaluating and improving the safety of LLMs. 中文安全prompts,用于评估和提升大模型的安全性。
http://coai.cs.tsinghua.edu.cn/leaderboard/
Apache License 2.0
853 stars 81 forks source link

在平台上提交了公开数据集的评测结果,但是一直没出结果。 #8

Closed fengyh3 closed 1 year ago

fengyh3 commented 1 year ago

如题,联系了邮箱也没有回复~所以想问问目前是什么状态呢?

TissueC commented 1 year ago

抱歉。该平台第一版基准因为评测的是生成数据的结果,每次评测都消耗时间和精力巨大。我们意识到了这个问题,我们正在修改评测基准的方式,之后会有以评判选择题的方式的评测基准。