search

DianboWork / SPN4RE

161 stars 37 forks source link

WebNLG实验结果的一点疑问 #17

Open syfshigechunvzuo opened 3 years ago

syfshigechunvzuo commented 3 years ago

我使用您readme里的WebNLG partial match启动命令，得到结果是Best result on test set is 0.928166 achieving at epoch 64，这和论文中的93.4有一点距离，请问93.4是不是您得到的最好结果，而不是平均结果呢？ 另外在metric.py中似乎都是exact matching，因为他要求了实体得头尾都相同，如果我把代码改成partial matching 是否可能进一步达到93.4呢

DianboWork commented 3 years ago

在exact matching下的数据和partial matching的数据完全不同

wxl1351641822 commented 2 years ago

他的那个数据就是partial的数据，训练时数据就只有尾巴……