search

murphypei / murphypei.github.io

15 stars 6 forks source link

ReLU 激活函数中神经元死亡问题 | 拾荒志 #52

Closed murphypei closed 2 years ago

murphypei commented 4 years ago

https://murphypei.github.io/blog/2020/09/relu-dying.html

最近在看 MobileNetV3 的结构特征，又碰到了新的激活函数，查看了其与 ReLU 的联系，联想到之前看到过的 ReLU 的问题，做个记录。

ZhiQiangYang513 commented 2 years ago

讲的很好

murphypei commented 2 years ago

@ZhiQiangYang513 讲的很好

谢谢