Searching for MobileNetV3

[agatan]

• https://arxiv.org/abs/1905.02244

MobileNet シリーズ！Neural Architecture Search を用いて（特にモバイル CPU 上で）高効率なアーキテクチャを探索し、評価した話。

[agatan]

• https://arxiv.org/abs/1905.02244

MobileNet シリーズ！Neural Architecture Search を用いて（特にモバイル CPU 上で）高効率なアーキテクチャを探索し、評価した話。 MobileNetV2 で採用している module にいくつかの変更を加えたものを building block としている。

1. non-linearity として swith を採用
2. SE block の採用（MnasNet ですでに採用されている）
3. SE も swith も sigmoid をつかうが、sigmoid は遅いので hard_sigmoid で代用

MnasNet で採用されている NAS で global structure を決定し、NetAdapt algorithm で層単位の fine tune をしている。