Open munema opened 4 years ago
Paper link : http://papers.nips.cc/paper/8825-learning-by-abstraction-the-neural-state-machine Author : Hudson, Drew and Manning, Christopher D Conference : NeurIPS 2019 Source code : https://github.com/ceyzaguirre4/NSM
入力画像が与えられると, その視覚的な構造をグラフとして予測する. またそのグラフ構造には, 視覚情報と言語情報 (りんごの画像とりんご・赤・丸い)が結びついているため, グラフを用いた推論を行うことで, 質問に答えることができる. Figure 1のようにグラフ構造を学習する. その結果Figure 2のような質問に答えれることが可能になる.
Paper link : http://papers.nips.cc/paper/8825-learning-by-abstraction-the-neural-state-machine Author : Hudson, Drew and Manning, Christopher D Conference : NeurIPS 2019 Source code : https://github.com/ceyzaguirre4/NSM
概要
入力画像が与えられると, その視覚的な構造をグラフとして予測する. またそのグラフ構造には, 視覚情報と言語情報 (りんごの画像とりんご・赤・丸い)が結びついているため, グラフを用いた推論を行うことで, 質問に答えることができる. Figure 1のようにグラフ構造を学習する. その結果Figure 2のような質問に答えれることが可能になる.