chen700564 / RGB

Other
276 stars 25 forks source link

关于预测结果的字段含义 #18

Open lwj2001 opened 6 months ago

lwj2001 commented 6 months ago

{ "id": 35, "query": "微软花了多少钱收购动视暴雪", "ans": [ "687亿美元" ], "label": [ 1 ], "prediction": "根据提供的文档,微软收购动视暴雪的总交易额为687亿美元。", "docs": [这里是5个相关文档], "noise_rate": 0.6, "factlabel": 0 } 请问您这里的"factlabel"字段的含义是什么呢?

chen700564 commented 6 months ago

你好,这里factlabel指的是在 counterfactual robustness中模型是否发现了文档中的错误内容。所以对于其他任务通常都是0。