search

tm4roon / survey

Survey on machine learning.
14 stars 1 forks source link

CraftAssist Instruction Parsing: Semantic Parsing for a Minecraft Assistant #125

Open tm4roon opened 3 years ago

tm4roon commented 3 years ago

CraftAssist Instruction Parsing: Semantic Parsing for a Minecraft Assistant

自然言語によってMinecraftの世界での行動を操作するという研究。独自の形式的表現(logical form)や文法規則を定義し、データセットを構築している。 データセットはクラウドソーシングを用いた以下3種類の方法により構築している。

  1. Rephrase: 自動生成したテンプレートを言い換える ・定義した文法規則から、自然言語文と形式表現のペアを自動生成 (Template) ・生成したペアの自然言語文をクラウドソーシングを用いて言い換え
  2. Prompt: 画像にキャプションを付ける
  3. Interactive: 実際にAssistant botと会話をしながらゲームをプレイする

結果として、TemplateやRephraseは高い精度で変換できるのものの、PromptやInteractiveでの性能は総じて低く、Rephraseを含むテンプレートから生成したデータと人間が生成したデータに差があることを明らかにした。

文献情報