Open syfshigechunvzuo opened 3 years ago
我使用您readme里的WebNLG partial match启动命令,得到结果是Best result on test set is 0.928166 achieving at epoch 64,这和论文中的93.4有一点距离,请问93.4是不是您得到的最好结果,而不是平均结果呢? 另外在metric.py中似乎都是exact matching,因为他要求了实体得头尾都相同,如果我把代码改成partial matching 是否可能进一步达到93.4呢
在exact matching下的数据和partial matching的数据完全不同
他的那个数据就是partial的数据,训练时数据就只有尾巴……
我使用您readme里的WebNLG partial match启动命令,得到结果是Best result on test set is 0.928166 achieving at epoch 64,这和论文中的93.4有一点距离,请问93.4是不是您得到的最好结果,而不是平均结果呢? 另外在metric.py中似乎都是exact matching,因为他要求了实体得头尾都相同,如果我把代码改成partial matching 是否可能进一步达到93.4呢