PaddlePaddle / Paddle3D

A 3D computer vision development toolkit based on PaddlePaddle. It supports point-cloud object detection, segmentation, and monocular 3D object detection models.
Apache License 2.0
573 stars 141 forks source link

PETR算法训练无法收敛 #408

Open LeungWaiHo opened 1 year ago

LeungWaiHo commented 1 year ago

根据https://github.com/PaddlePaddle/Paddle3D/tree/develop/docs/models/petr 下训练命令, 无论是单卡还是多卡,都无法收敛,总在某一阶段后LOSS突然增大/与Box相关的LOSS突然为0;

LielinJiang commented 10 months ago

麻烦分享一下您的训练命令

LeungWaiHo commented 10 months ago

麻烦分享一下您的训练命令

您好,我的训练命令和文档里给出的一样的

LielinJiang commented 8 months ago

https://github.com/PaddlePaddle/Paddle/issues/56493, 才发现这个之前已经验证过一次了。建议还是想想办法对齐一下环境,或者使用一下paddle的docker吧。cuda可以下载到/usr/local/这个位置软连接,cuddn可以下载后export动态库位置的方式修改。