Open yusukekyokawa opened 3 years ago
https://arxiv.org/pdf/1502.03167.pdf Batch Normalizationの提案論文.
Sergey Ioffe and Christian Szegedy
2015
ネットワークの構造が深くなると,ある層の特徴の分布がバッチごとに大きく変化する内部共変量シフト()が発生し,学習が効率的に進まないことが起きる. 各層において,バッチごとの分布を調整してなるべく分布の偏りが生じないように調整する方法がバッチ正規化.
書誌情報
論文リンク
https://arxiv.org/pdf/1502.03167.pdf Batch Normalizationの提案論文.
著者/所属機関
Sergey Ioffe and Christian Szegedy
conf/journal
year
2015
どんな論文か?
ネットワークの構造が深くなると,ある層の特徴の分布がバッチごとに大きく変化する内部共変量シフト()が発生し,学習が効率的に進まないことが起きる. 各層において,バッチごとの分布を調整してなるべく分布の偏りが生じないように調整する方法がバッチ正規化.![image](https://user-images.githubusercontent.com/39184448/90494479-81ead080-e17e-11ea-906d-300513fd4f8d.png)
新規性
手法
結果
コメント