[논문 리뷰] NLG vs. Templates

Ehud Reiter|arXiv (Cornell University)|1995. 04. 23.

Language, Metaphor, and Cognition참고 문헌 11인용 수 106

한 줄 요약

이 논문은 적용 분야에서 신경 언어 생성(NLG)과 템플릿 기반 방법 간의 비교적 가치를 검토하며, 연구 공동체가 이 중요한 질문을 충분히 탐색하지 못하고 있다고 주장한다. NLG가 템플릿보다 추가 가치를 어떻게 제공하는지 측정하는 데 있어 핵심 과제들을 제시하고, NLG의 실용적 우월성을 높이기 위한 구체적인 연구 방향을 제안한다.

ABSTRACT

One of the most important questions in applied NLG is what benefits (or ‘valueadded’, in business-speak) NLG technology offers over template-based approaches. Despite the importance of this question to the applied NLG community, however, it has not been discussed much in the research NLG community, which I think is a pity. In this paper, I try to summarize the issues involved and recap current thinking on this topic. My goal is not to answer this question (I don’t think we know enough to be able to do so), but rather to increase the visibility of this issue in the research community, in the hope of getting some input and ideas on this very important question. I conclude with a list of specific research areas I would like to see more work in, because I think they would increase the ‘value-added’ of NLG over templates.

연구 동기 및 목표

• 실제 적용 환경에서 NLG가 템플릿 기반 시스템보다 실제로 어떤 가치를 추가하는지에 대한 논의가 부족하지만 매우 중요한 질문을 부각시키기 위해.
• 이 문제를 연구 분야의 NLG 공동체 내에서 더 넓게 인식시켜 추가 연구와 협업을 촉진하기 위해.
• NLG가 템플릿보다 실용적 우월성을 높일 수 있는 구체적인 연구 방향을 특정하기 위해.
• NLG 대 템플릿 논의에 관해 현재의 통찰을 종합하여, 실행 가능한 연구 기회에 초점을 맞추기 위해.

제안 방법

• NLG와 템플릿 기반 생성에 관해 기존 연구 및 산업 관점의 체계적 검토와 통합.
• NLG가 템플릿을 능가할 수 있는 핵심 차원(예: 언어적 다양성 및 적응 가능성)의 규명.
• NLG가 템플릿 대비 추가 가치를 평가하는 데 있어 현재의 한계 분석.
• NLG의 실용적 유용성에 대한 격차를 바탕으로 한 구체적인 연구 분야 제안.
• 탄력성, 유지보수성, 출력 품질 등의 기준에 따라 NLG와 템플릿을 비교하기 위한 개념적 프레임워크 활용.

실험 결과

연구 질문

• RQ1 실제 응용에서 NLG는 템플릿 기반 시스템에 비해 어떤 측정 가능한 이점을 제공하는가?
• RQ2 왜 연구 공동체는 NLG와 템플릿 간의 비교적 가치를 거의 간과해 왔는가?
• RQ3 어떤 연구 방향이 NLG의 실용적 가치를 템플릿보다 효과적으로 높일 수 있는가?
• RQ4 단순한 유창성과 문법적 정확성 외에 NLG의 추가 가치를 어떻게 더 잘 평가할 수 있는가?

주요 결과

• 실제 적용 환경에서 중요시되는 바이지만, 연구 공동체는 NLG가 템플릿보다 실용적 가치를 충분히 다루지 못하고 있다.
• NLG가 템플릿보다 의미 있는 우월성을 제공하는 시점이나 방식에 대해 의견의 일치가 없고 체계적인 평가가 부족하다.
• 현재의 NLG 시스템은 실제 구현 환경에서 템플릿보다 명확하고 측정 가능한 이점을 보여주지 못하는 경우가 많다.
• 논문은 제어 가능한 생성 및 입력 변동에 대한 강건성과 같은 특정 연구 분야를 특정하여, 템플릿과의 가치 격차를 메울 수 있음을 밝혔다.