Open JasonWayne opened 5 months ago
深度学习的多个loss如何平衡? 王晋东不在家 王晋东不在家 微软亚洲研究院高级研究员,《迁移学习导论》英文版上市啦 霍华德、marsggbo 等 2444 人赞同了该回答 多个loss引入pareto优化理论,基本都可以涨点的。
例子:Multi-Task Learning as Multi-Objective Optimization
可以写一个通用的class用来优化一个多loss的损失函数,套进任何方法里都基本会涨点。反正我们在自己的研究中直接用是可以涨的。
One sentence
Paper
Code
Motivation
Novelties & Key contribution
Method
Experiments
Rethinking
Reference
深度学习的多个loss如何平衡? 王晋东不在家 王晋东不在家 微软亚洲研究院高级研究员,《迁移学习导论》英文版上市啦 霍华德、marsggbo 等 2444 人赞同了该回答 多个loss引入pareto优化理论,基本都可以涨点的。
例子:Multi-Task Learning as Multi-Objective Optimization
可以写一个通用的class用来优化一个多loss的损失函数,套进任何方法里都基本会涨点。反正我们在自己的研究中直接用是可以涨的。