yiskw713 / paper_summary

Write summaries of papers I've read in Japanese
10 stars 1 forks source link

Pay Attention to MLPs #163

Open yiskw713 opened 3 years ago

yiskw713 commented 3 years ago

概要

image

self-attentionなしのゲート付きMLP構造(gMLP)で,画像認識タスクやNLPタスクでTransformerに匹敵する精度を実現.

提案手法

実験

Comment

Reference

link