-
https://arxiv.org/abs/1611.01578
-
https://arxiv.org/pdf/1611.01578.pdf
Neural networks are powerful and flexible models that work well for many difficult learning tasks in image, speech and natural language understanding. Despite t…
leo-p updated
7 years ago
-
# Neural Architecture Search with Reinforcement Learning #
- Author: Barret Zoph, Quoc Le
- Origin: https://openreview.net/forum?id=r1Ue8Hcxg¬eId=r1Ue8Hcxg
- Related:
- https://github.com/t…
-
https://arxiv.org/abs/1902.07638
-
## 一言でいうと
ネットワーク構造の自動探索で、再現可能なベースラインを作るという研究。構造探索はハイパーパラメーター探索の一種なので、random search/early stoppingベースのシンプルかつ強力なASHAでベースラインを構築。weight-sharingでの探索でSOTAに近い結果が得られたとのこと。そのため、評価値として「(同等の結果を得るのに)何本のrandom …
-
https://arxiv.org/abs/1802.03268
https://github.com/melodyguan/enas
模型自动设计
-
## 一言でいうと
コントローラーは計算グラフの中の最も最適なサブグラフの探索方法を学ぶ。ヴァリデーションセットにおける報酬がもっとも最大になるように学習していく。これは選択したサブグラフがモデルと一致するようにキャノ二カルクロスエントロピーを最小化するように学習することを意味する。論文ではGPU(GTX1080Ti)を1枚で10時間程度で学習しPenn Treebank datasetで5…
-
## 一言でいうと
これまでエキスパートの手によって設計されてきたネットワークアーキテクチャを、進化的アルゴリズムの一つである山登り法を用いて自動的に探索する論文。
このような手法はNAS(Neural Architecture Search)と呼ばれており、論文では本手法をNASH (NAS by Hillclimbing) と称している。
NASはこれ以前にも多くの研究がなされてきたが、…
-
https://arxiv.org/pdf/1806.10282.pdf
https://github.com/keras-team/autokeras
最近 autokeras 的代码有了很大的改动，因为 Keras 自己推出了自己的 keras-tuner。趁这个机会读一下这篇论文。
PS，autokeras 现在还不支持分布式训练，也不支持并行的 Trial
KDD'…
-
In other words ... better packages than this one.