kent0304 / semantic-scoring

Automatic Scoring for Picture Description
0 stars 0 forks source link

写真描画問題アンケートの実施 #6

Open kent0304 opened 3 years ago

kent0304 commented 3 years ago

アンケート結果 https://docs.google.com/spreadsheets/d/1Go7An0Pm24bBzkn-l1uc4SraVv1E_okz9QelsIdreDY/edit?usp=sharing

kent0304 commented 3 years ago

簡潔な解答の方が正答してしまうという課題

採点基準が「写真に沿った内容である」「文法的に正しい」の2点である場合、複雑な文を書くよりも、比較的容易な語彙を用いて簡潔な文を書いたときの方が点数が高くなる傾向にある。一方で、ネイティブの書く文は非ネイティブの文に比べて、語彙レベルが高く多様な文を産出していることがわかった。

学習の目的

この産出能力の訓練の目的は、ネイティブのような語彙レベルの高い多様な文を産出することにあり、簡潔で正しい文を産出することが最終的な目標ではない。従って、非ネイティブの文から、ネイティブの書く文に近づくようなフィードバックを与えることに価値があるかもしれない。