[論文レビュー] NLG vs. Templates

Ehud Reiter|arXiv (Cornell University)|Apr 23, 1995

Language, Metaphor, and Cognition参考文献 11被引用数 106

ひとこと要約

この論文は、応用的自然言語生成（NLG）におけるニューラル言語生成（NLG）とテンプレートベース手法の比較的価値を検討し、研究コミュニティがこの重要な問いを十分に探求していないと主張している。NLGがテンプレートよりも追加価値をもたらす測定における主要な課題を明らかにし、NLGの実用的優位性を高めるための的を射た研究方向性を提案している。

ABSTRACT

One of the most important questions in applied NLG is what benefits (or ‘valueadded’, in business-speak) NLG technology offers over template-based approaches. Despite the importance of this question to the applied NLG community, however, it has not been discussed much in the research NLG community, which I think is a pity. In this paper, I try to summarize the issues involved and recap current thinking on this topic. My goal is not to answer this question (I don’t think we know enough to be able to do so), but rather to increase the visibility of this issue in the research community, in the hope of getting some input and ideas on this very important question. I conclude with a list of specific research areas I would like to see more work in, because I think they would increase the ‘value-added’ of NLG over templates.

研究の動機と目的

• 実用的状況におけるNLGがテンプレートベースシステムよりも実際に何を追加価値として提供するかという、あまり議論されていないが極めて重要な問いを浮き彫りにすること。
• この問題を研究コミュニティ内のNLG研究者により広く認知してもらい、さらなる調査と協働を促進すること。
• NLGがテンプレートよりも実用的優位性を高めることに寄与する具体的な研究方向性を特定すること。
• NLGとテンプレートの議論に関する現在の考えを統合し、実行可能な研究機会に焦点を当てる。

提案手法

• NLGとテンプレートベース生成に関する既存の研究および産業界の見解を体系的にレビュー・統合すること。
• NLGがテンプレートを上回る可能性がある分野、例えば言語的多様性や適応性といった、重要な次元の特定。
• NLGのテンプレートに対する追加価値を評価する現状の制限の分析。
• NLGの実用的有用性におけるギャップを踏まえた的を射た研究分野の提案。
• 柔軟性、保守性、出力品質といった基準において、NLGとテンプレートを比較する概念的枠組みの使用。

実験結果

リサーチクエスチョン

• RQ1 実世界の応用において、NLGはテンプレートベースシステムに比べてどのような測定可能な利点を提供するか？
• RQ2 なぜ研究コミュニティはNLGとテンプレートの比較的価値をほとんど無視してきたのか？
• RQ3 NLGの実用的価値をテンプレートよりも顕著に高めるために、どの研究方向性が最も効果的か？
• RQ4 単なる文の流暢さや文法的正しさを超えて、NLGの追加価値をどのようによりよく評価できるか？

主な発見

• 実用的状況においてNLGの実用的価値がテンプレートと比較して十分に扱われていないにもかかわらず、その重要性は認識されている。
• NLGがテンプレートを上回る意味のある利点をもたらす状況や方法について、合意形成がなく、体系的な評価も不足している。
• 現在のNLGシステムは、実世界の展開環境において、しばしばテンプレートよりも明確で測定可能な利点を示せていない。
• 本論文は、制御可能な生成や入力の変動に対する耐性といった、価値格差を埋める可能性を秘めた具体的な研究分野を同定している。