search

PaddlePaddle / PaddleClas

A treasure chest for visual classification and recognition powered by PaddlePaddle
Apache License 2.0
5.43k stars 1.17k forks source link

SSLD蒸馏训练策略问题 #1069

Closed pawopawo closed 2 years ago

pawopawo commented 3 years ago

image 请问SSLD蒸馏训练中，有使用mixup这些trick吗？ 比如上表的83.0，有使用mixup吗？

cuicheng01 commented 3 years ago

没有使用mixup，但是使用了诸如randaugment这样的策略，其他的数据增强没有怎么使用。

marvis commented 3 years ago

@cuicheng01 可以更加详细的描述一下ResNet50_vd_ssld_v2 83.0%这个模型的训练过程吗? 在线文档里面只用了一句话描述 “ResNet50_vd_ssld_v2是在ResNet50_vd_ssld训练策略的基础上加上AutoAugment训练得到”。 我不明白ResNet50_vd_ssld_v2是从头训练得到的， 还是用ResNet50_vd_ssld 82.4%模型finetune得到的？

paddle-bot-old[bot] commented 2 years ago

Since this issue has not been updated for more than three months, it will be closed, if it is not solved or there is a follow-up one, please reopen it at any time and we will continue to follow up. It is recommended to pull and try the latest code first. 由于该问题超过三个月未更新，将会被关闭，若问题未解决或有后续问题，请随时重新打开（建议先拉取最新代码进行尝试），我们会继续跟进。