search

cyzhh / MMOS

Mix of Minimal Optimal Sets (MMOS) of dataset has two advantages for two aspects, higher performance and lower construction costs on math reasoning.
67 stars 3 forks source link

keyerror：“score” #1

Closed xliang-L closed 5 months ago

xliang-L commented 6 months ago

请问src.generate 的--source_file 参数的输入是tora模型的output吗？ 我使用tora直接生成 的output 会有一个这样的报错显示没有score. 报错位置在src/create.py 的172行

Zui-C commented 6 months ago

score是推理答案正误的label，依靠它进行一轮过滤。用tora代码infer，其包含eval，在一步那时候产生。如果没有，可以自行比对答案加入就行。