Onion12138 / CasRelPyTorch

Reimplement CasRel model in PyTorch.使用PyTorch对吉林大学CasRel模型进行复现,并在百度关系抽取数据集上训练测试。
184 stars 26 forks source link

关于代码复现的一些请教 #10

Open stc950502 opened 2 years ago

stc950502 commented 2 years ago

作者您好!首先感谢您所做的工作。 我下载了您的代码,在没有改动的情况下运行了几次,但是测试集上的f1、precision、和recall分别在0.70、0.80和0.63左右,和readme中的0.78 0.80、 0.76差距比较大,感觉主要是recall太低导致的,您知道具体的原因吗?

maxuejie514 commented 2 years ago

作者您好!首先感谢您所做的工作。 我下载了您的代码,在没有改动的情况下运行了几次,但是测试集上的f1、precision、和recall分别在0.70、0.80和0.63左右,和readme中的0.78 0.80、 0.76差距比较大,感觉主要是recall太低导致的,您知道具体的原因吗?

你好,我也有这个问题,请问您解决了吗? @stc950502

Williamgjn commented 1 year ago

我在10个epoch训练之后,在dev上best f1: 0.82, precision: 0.88, recall: 0.77,在测试集上的f1、precision、和recall分别在0.67、0.81和0.57,仅供参考。