HusterYoung / MPLT

MIT License
20 stars 3 forks source link

论文复现问题 #2

Closed MelanTech closed 10 months ago

MelanTech commented 10 months ago

您好,我在尝试复现您的工作时发现在LasHeR数据集上的测试指标与论文中差异较大(PR -1.6% / SR -0.6%),请问您在训练时使用的是LasHeR0327还是LasHeR0428,这是否与数据集版本或环境有关?此外,不知道您是否方便提供一下训练日志以便对比,感激不尽!

环境: torch 1.11.0 + CUDA11.4 LasHeR 0327 RTX3090 * 2

Eric-Chen-L commented 10 months ago

您好,我想问问你在复现效果时是否对这份代码有所修改,因为我在未进行任何修改时训练拟合非常糟糕,全部层都未冻结,pretrain也是用作者给的参数,但正常跟踪没跑出来,感觉非常困惑,想问问您的情况,好奇问一下您说LasHeR0327和LasHeR0428是指什么,是指LasHeR在这两个时间的发布的版本吗

MelanTech commented 10 months ago

您好,我想问问你在复现效果时是否对这份代码有所修改,因为我在未进行任何修改时训练拟合非常糟糕,全部层都未冻结,pretrain也是用作者给的参数,但正常跟踪没跑出来,感觉非常困惑,想问问您的情况,好奇问一下您说LasHeR0327和LasHeR0428是指什么,是指LasHeR在这两个时间的发布的版本吗

您好,我没有对代码进行任何改动,在更换环境(数据集仍然使用LasHeR0327)以后性能有所提升,但是还是和论文中有一点差距(PR -0.98% / SR -0.1%)。关于数据集,LasHeR0327和LasHeR0428是指LasHeR发布的两个版本,LasHeR0428应该是作者发现一些问题修改后上传的新版本数据集。LasHeR两个版本的数据集都存在图片空白的情况,在官方GitHub的Issue上有讨论,对于空白的图片我采用了删除的操作,您可以检查一下这一点。此外,您也可以检查一下您的环境配置是否符合官方提供的版本要求。希望可以帮到您。

HusterYoung commented 10 months ago

您好,我在尝试复现您的工作时发现在LasHeR数据集上的测试指标与论文中差异较大(PR -1.6% / SR -0.6%),请问您在训练时使用的是LasHeR0327还是LasHeR0428,这是否与数据集版本或环境有关?此外,不知道您是否方便提供一下训练日志以便对比,感激不尽!

环境: torch 1.11.0 + CUDA11.4 LasHeR 0327 RTX3090 * 2

您好,我使用的是0428版本的LasHeR,有一些损坏的图片是直接剔除了

HusterYoung commented 10 months ago

关于训练log,最近重装系统被我弄丢了……我看看这两天能不能重新训一版出来吧

Eric-Chen-L commented 10 months ago

您好,我想问问你在复现效果时是否对这份代码有所修改,因为我在未进行任何修改时训练拟合非常糟糕,全部层都未冻结,pretrain也是用作者给的参数,但正常跟踪没跑出来,感觉非常困惑,想问问您的情况,好奇问一下您说LasHeR0327和LasHeR0428是指什么,是指LasHeR在这两个时间的发布的版本吗

您好,我没有对代码进行任何改动,在更换环境(数据集仍然使用LasHeR0327)以后性能有所提升,但是还是和论文中有一点差距(PR -0.98% / SR -0.1%)。关于数据集,LasHeR0327和LasHeR0428是指LasHeR发布的两个版本,LasHeR0428应该是作者发现一些问题修改后上传的新版本数据集。LasHeR两个版本的数据集都存在图片空白的情况,在官方GitHub的Issue上有讨论,对于空白的图片我采用了删除的操作,您可以检查一下这一点。此外,您也可以检查一下您的环境配置是否符合官方提供的版本要求。希望可以帮到您。

感谢感谢,LasHeR这块没了解过,我去了解一下

MelanTech commented 10 months ago

关于训练log,最近重装系统被我弄丢了……我看看这两天能不能重新训一版出来吧

感谢您的帮助!

HusterYoung commented 10 months ago

关于训练log,最近重装系统被我弄丢了……我看看这两天能不能重新训一版出来吧

感谢您的帮助!

log已上传,复现结果无误。

MelanTech commented 10 months ago

关于训练log,最近重装系统被我弄丢了……我看看这两天能不能重新训一版出来吧

感谢您的帮助!

log已上传,复现结果无误。

非常感谢!