lonePatient / BERT-NER-Pytorch

Chinese NER(Named Entity Recognition) using BERT(Softmax, CRF, Span)
MIT License
2.06k stars 424 forks source link

loss不收敛问题 #8

Closed hackerxiaobai closed 4 years ago

hackerxiaobai commented 4 years ago

该问题依然存在,我并没有解决哟。link

Fan9 commented 4 years ago

我也是loss不收敛问题 我把输入和label都打出来看了一遍 没发现问题

lonePatient commented 4 years ago

@Fan9 把日志提供看看,以及你们使用的数据集 运行方式吧 公开的数据集还是你个人业务数据集?

lonePatient commented 4 years ago

@Fan9 可以从主页上看到邮箱,私发邮箱吧

hackerxiaobai commented 4 years ago

crf这个看起来好像loss不收敛但是eval时是有结果的,你的这个loss其实只是比较大而已,是收敛的,不好意思,没仔细看

Fan9 commented 4 years ago

对的。我也是最开始loss=20010 训练loss就下降到19990。 但是eval是精度基本都在90%上下。是收敛的只是不知道为什么loss这么大并且下降到19990后就不在下降了

lonePatient commented 4 years ago

CRF实现的问题,你们改下就没有那么大了