Automatic Article Commenting: the Task and Dataset, ACL2018 - Githubissues

fujiso / papers

NLP/Deep Learning関連の論文まとめ

4 stars 0 forks source link

Automatic Article Commenting: the Task and Dataset, ACL2018 #7

Open fujiso opened 5 years ago

fujiso commented 5 years ago

概要

記事に対するコメントを自動で生成するタスクの提案,そのための中国語のデータセットの提供.
人手評価との相関が高い自動評価手法の提案も行っている．
(BLEU,METEOR,ROUGEに重みをつけて拡張)

著者

Lianhui Qin, Lemao Liu, Victoria Bi, Yan Wang, Xiaojiang Liu, Zhiting Hu, Hai Zhao, Shuming Shi

リンク

論文: https://arxiv.org/abs/1805.0366
データ: http://ai.tencent.com/upload/PapersUploads/article_commenting.tgz

貢献

記事に対するコメント生成というタスクの提案
データセットの提供
- 中国語
- ニュースの記事タイトル,コメント,ラベルの3つ組
- 人手により，コメントの良さを1~5の5段階評価
人手評価に近い自動評価指標の提案

データ詳細

実験

METEORを重み付けしたW-METEORで，他の自動評価手法よりも，人手評価よりも高い相関があった．

Future work

提案したタスクを，文読解や外部知識ベースの深層生成モデルで解きたい
作ったデータを元に，コメントのランキング，読者評価の予測，ヘッドライン生成などを行いたい．

fujiso commented 5 years ago

コメント生成して何が嬉しいのかと思ったが，チャットボットに利用するのは面白そうだと感じた. 建設的な返答,みたいな．