Open wisteria2gp opened 4 years ago
画像認識にAttention機構を利用する。
ResNetで層を深くしながらAttention機構を導入することで当時のSOTAを達成。
単純にAttentionを適用するだけでは良くならないとのことで、画像認識のようなFeedForwardNetwork向けに改良された機構を提案している。
https://arxiv.org/abs/1704.06904
Fei Wang, Mengqing Jiang, Chen Qian, Shuo Yang, Cheng Li, Honggang Zhang, Xiaogang Wang, Xiaoou Tang
2017/04/23
松尾研の輪読資料
一言でいうと
画像認識にAttention機構を利用する。
ResNetで層を深くしながらAttention機構を導入することで当時のSOTAを達成。
単純にAttentionを適用するだけでは良くならないとのことで、画像認識のようなFeedForwardNetwork向けに改良された機構を提案している。
論文リンク
https://arxiv.org/abs/1704.06904
著者/所属機関
Fei Wang, Mengqing Jiang, Chen Qian, Shuo Yang, Cheng Li, Honggang Zhang, Xiaogang Wang, Xiaoou Tang
投稿日付(yyyy/MM/dd)
2017/04/23
概要
新規性・差分
手法
結果
コメント
松尾研の輪読資料