search

cmnfriend / O-LoRA

MIT License
149 stars 18 forks source link

关于指标 #35

Open suchenyang2023 opened 1 month ago

suchenyang2023 commented 1 month ago

你好，请问在bert模型上的指标是accuracy，在llama这种擅长生成的模型上的指标是什么了？ exact match rogue1 rogueL的平均吗？ 非常感谢

qwpyyx commented 1 month ago

+1,比较好奇论文table2中的指标是什么的平均？同时想请问一下，假设我当前时按order1顺序训练，最后一个任务是dbpedia，训练完后我得到“predict_exact_match”以及“predict_exact_match_for_dbpedia”的分数，请问这两个有什么区别？谢谢 image