f1值不能重现 - Githubissues

lemonhu / NER-BERT-pytorch

PyTorch solution of named entity recognition task Using Google AI's pre-trained BERT model.

MIT License

435 stars 110 forks source link

Open znsoftm opened 2 years ago

znsoftm commented 2 years ago

使用的是原始数据，但是用的是新的Pytorch和transformers , 但是f1值只能达到50%左右。而且这值是micro还是macro?

znsoftm commented 2 years ago

Best val f1: 50.08

znsoftm commented 2 years ago

early stop后，只有50%左右的f1值

znsoftm commented 2 years ago

经过对比，确实如其它人所说的trasnformers的版本有影响。用最新的就会有问题。

znsoftm commented 2 years ago

用旧库，f1是92-94%左右。用新版本transformer只有 50%