csuhan / opendet2

Official code of the paper "Expanding Low-Density Latent Regions for Open-Set Object Detection" (CVPR 2022)
https://arxiv.org/abs/2203.14911
103 stars 11 forks source link

关于评估VOC_COCO_20_40_test的问题 #19

Open jinweiisgreat opened 1 year ago

jinweiisgreat commented 1 year ago

test 你好,我在用你们训练好的模型评估VOC_COCO_20_40_test时,mAP特别低,其他指标都很正常。 test2 然后在评估20_60时mAP又下降到13,是怎么回事呢? 只有在VOC评估中达到了80.02%,希望得到回复,谢谢! VOC_COCO_20_40 的意思是指20个VOC类(20)和20个VOC类+20个非VOC类(40)吗?

jinweiisgreat commented 1 year ago

我好像发现问题了AP@K是mAPk,那mAP是指包括未知类的平局精度,所以这么低?

luoh226 commented 1 year ago

@jinweiisgreat 是的,它的mAP是81类的

olhnaid commented 1 year ago

您好 !您复现的似乎比官方给的链接里的测试文档效果要好一点,能否问问您是怎么做到的吗? image 如这里2w多而您的是16000多

jinweiisgreat commented 1 year ago

您好 !您复现的似乎比官方给的链接里的测试文档效果要好一点,能否问问您是怎么做到的吗? image 如这里2w多而您的是16000多

截图里我用的是他提供的weight。而我自己训练的模型,结果跟你差不多,ap@k低3%-4%左右。不知道为什么。如果你解决了欢迎跟我交流。