文の移動者類似度による多文テキストの自動評価

Sentence Mover’s Similarity: Automatic Evaluation for Multi-Sentence Texts

文の移動者類似度を用いた評価手法

2019-01-01 被引用 143 中級
強化学習ベンチマーク
  • 機械生成テキストの評価は人手を避ける方法が求められています。
  • 本研究では文の移動者類似度に基づく自動評価手法を提案します。
  • この手法はROUGEよりも人間の評価と高い相関を示します。
自動評価文の移動者類似度強化学習

機械生成テキストの評価は、従来の人手による方法に代わる自動手法が求められています。本論文では、文の移動者類似度を用いた新しい評価手法を提案し、従来のROUGEと比較して人間の評価との相関が高いことを示します。このアプローチは、強化学習を用いた生成モデルの報酬としても活用可能です。テキスト生成や評価に興味がある研究者にとって、特に有用な内容です。

テキスト生成や評価に関心のある研究者や開発者に向いています。

Sentence Mover’s Similarity: Automatic Evaluation for Multi-Sentence Texts
Elizabeth Clark, Aslı Çelikyılmaz, Noah A. Smith