Closed HenryPurcell3 closed 4 months ago
作者您好,我最近复现了您的实验,首先是loss容易到nan,看起来是梯度爆炸了,而且我的metricloss久久下不来一直在0.7几左右,请问应该怎么办了
loss 出现 nan 的话可以尝试提取相位的时候加上一个 bias:
谢谢宝贝
作者您好,我最近复现了您的实验,首先是loss容易到nan,看起来是梯度爆炸了,而且我的metricloss久久下不来一直在0.7几左右,请问应该怎么办了