search

longlongman / CasRel-pytorch-reimplement

Pytorch reimplement of the paper "A Novel Cascade Binary Tagging Framework for Relational Triple Extraction" ACL2020. The original code is written in keras.
197 stars 52 forks source link

测试集没有标签 #7

Open pangjiajia opened 3 years ago

pangjiajia commented 3 years ago

你好，请问我直接下载你的代码，其中数据的测试集并没有标签，提供的cmed数据集的链接也打不开了，请问还有哪里可以获得带标签的CMED测试集数据吗？还是你也是用的验证集数据的结果？

longlongman commented 3 years ago

CMED是个比赛，测试集没有标签很正常，我的结果是提交给官方他们算的。

pangjiajia commented 3 years ago

谢谢回复，还想问下你的验证集效果最高在多少呢?

longlongman commented 3 years ago

不好意思已经忘记了

bigbigkid commented 3 years ago

谢谢回复，还想问下你的验证集效果最高在多少呢?

我只训练了100epoch,验证集的F1为0.52

pangjiajia commented 3 years ago

谢谢回复，还想问下你的验证集效果最高在多少呢?

我只训练了100epoch,验证集的F1为0.52

谢谢回复，我自己测试100轮的话验证集最高0.5176，原代码保留两位应该也是0.52。另外我发现原代码读取数据时，在确定主客体标记位置时，对包含数字的实体标记由于长度不一致会出错，导致标记错误，修正之后效果略有提升，100轮最高为0.5313。