[논문 리뷰] Analysis of Titles and Readers For Title Generation Centered on the Readers

Yasuko Senda, Yasusi Sinohara|ArXiv.org|2002. 07. 02.

Advanced Text Analysis Techniques참고 문헌 3인용 수 4

한 줄 요약

이 논문은 제목의 내용과 어휘가 독자 이해도, 관심도, 긍정적 감정에 미치는 영향을 분석함으로써 독자 중심의 제목 생성 접근법을 제안한다. 연구에서 드러난 바, 일반 독자에게 가장 효과적으로 다가오는 것은 기술의 목적을 명시하는 방식(패턴 2.0)이며, 전문가 독자는 제목의 구조에 덜 영향을 받는다는 점을 확인하여, 독자 전문성 수준에 맞춘 제목 생성 전략 수립이 필요하다는 것을 시사한다.

ABSTRACT

The title of a document has two roles, to give a compact summary and to lead the reader to read the document. Conventional title generation focuses on finding key expressions from the author's wording in the document to give a compact summary and pays little attention to the reader's interest. To make the title play its second role properly, it is indispensable to clarify the content (``what to say'') and wording (``how to say'') of titles that are effective to attract the target reader's interest. In this article, we first identify typical content and wording of titles aimed at general readers in a comparative study between titles of technical papers and headlines rewritten for newspapers. Next, we describe the results of a questionnaire survey on the effects of the content and wording of titles on the reader's interest. The survey of general and knowledgeable readers shows both common and different tendencies in interest.

연구 동기 및 목표

• 제목 생성을 저자 중심에서 독자 중심으로 전환하기 위해 독자와 제목 간의 참여도를 분석한다.
• 기술 논문 제목과 신문 헤드라인을 비교함으로써 일반 독자를 끌어들이는 제목의 일반적인 내용 및 어휘적 특징을 규명한다.
• 다양한 독자 집단에서 다양한 제목 표현 패턴이 이해도, 긍정적 감정, 관심도에 미치는 영향을 실증적으로 평가한다.
• 단순 요약을 넘어서 독자 참여도를 향상시키는 제목 생성을 위한 데이터 기반 지침을 제공한다.
• 특정 독자 프로파일에 적합한 효과적인 표현 패턴을 규명하여 향후 제목 생성 시스템 개발에 기여한다.

제안 방법

• 1,464개의 기술 논문 제목과 313개의 신문 헤드라인 간 비교 문법 분석을 수행하여 기능별 구성요소(예: 행동, 대상, 목적, 방법)를 태깅하였다.
• 의무적 구성요소 구조에 기반해 제목을 표현 패턴으로 분류하였으며, 예를 들어 '개발 목적' (패턴 2.0), '행동' (패턴 1.0), '실행 방법' (패턴 1.1) 등이다.
• 공공, 무관심, 엔지니어, 연구자 등 네 가지 독자 집단에 속한 1,500명 이상의 응답자에게 웹 기반 설문조사를 실시하였다.
• 이해도, 유발된 긍정적 감정, 기술에 대한 관심도의 세 가지 지표를 사용해 독자 인상도를 측정하였다.
• 카이제곱 검정과 크래머의 V를 적용하여 표현 패턴과 독자 인상 간 연관성의 강도와 유의성을 평가하였다.
• 교차표를 활용해 다양한 전문성 수준에서 제목 구조와 독자 반응 간 관계를 분석하였다.

실험 결과

연구 질문

• RQ1 어떤 제목 표현 패턴이 일반 독자들의 이해도 향상에 가장 효과적인가?
• RQ2 다양한 기술 전문성 수준의 독자들에게 제목의 다양한 구조가 긍정적 감정 반응 수준에 어떻게 영향을 미치는가?
• RQ3 독자의 전문성 수준이 제목 어휘 및 내용이 관심도와 참여도에 미치는 영향에 얼마나 중대한 조절 효과를 가지는가?
• RQ4 목적, 방법, 기술 유형 등의 구성요소 중에서 비전문가 독자가 기술 콘텐츠에 끌리게 하는 데 가장 영향력 있는 요소는 무엇인가?
• RQ5 신문 헤드라인과 기술 논문 제목은 구조와 독자 유인력에서 어떻게 다를 수 있으며, 이를 바탕으로 제목 생성에 무엇을 배울 수 있는가?

주요 결과

• 의도적으로 기술의 목적을 명시하는 표현 패턴 2.0은 일반 독자 및 일반인 독자 집단에서 이해도, 긍정적 감정, 관심도 향상에 가장 효과적이었다.
• 비전문가 독자(일반인 및 무관심 집단)에게서 제목 구조와 독자 인상 간 연관성은 가장 강했으며, 이해도에 대해 크래머의 V 값이 각각 0.62와 0.59로 나타났다.
• 전문가 독자(엔지니어 및 연구자) 집단에서는 제목 구조의 영향력이 약했으며, 크래머의 V 값이 0.30 이하로 나타나 어휘 패턴에 덜 민감함을 시사했다.
• 모든 카이제곱 검정 결과 유의수준이 1% 이하로 나타나, 모든 독자 집단에서 제목 표현 패턴과 독자 인상 간 통계적으로 유의미한 관계가 있음을 확인했다.
• 개발 목적을 명시하는 제목(패턴 2.0)은 비전문가 대상에서 이해도, 긍정적 감정, 관심도의 세 가지 평가 차원에서 다른 패턴보다 항상 뛰어났다.
• 결과적으로 전문가 독자는 제목의 구조에 덜 영향을 받는다는 점을 고려할 때, 제목 생성 시스템은 타겟 독자의 전문성 수준에 맞게 유연하게 조정되어야 한다는 점을 시사한다.