[논문 리뷰] Annotating High-Level Structures of Short Stories and Personal Anecdotes

Boyang Li, Beth Cardier외 2명|arXiv (Cornell University)|2017. 10. 08.

Topic Modeling참고 문헌 25인용 수 8

한 줄 요약

이 논문은 라보프와 바레츠키의 功能적 내러티브 구조 이론과 프라이타그의 드라마틱 피라미드 이론을 통합하여 360편의 단편 소설과 개인적 에피소드에 고수준 내러티브 구조를 레이블링하는 새로운 어노테이션 체계를 제안한다. 문학 이론을 일관된 프레임워크로 구체화함으로써, 저자들은 NLP 시스템의 내러티브 이해 능력을 향상시키기 위한 유용한 자원을 창출한다.

ABSTRACT

Stories are a vital form of communication in human culture; they are employed daily to persuade, to elicit sympathy, or to convey a message. Computational understanding of human narratives, especially high-level narrative structures, remain limited to date. Multiple literary theories for narrative structures exist, but operationalization of the theories has remained a challenge. We developed an annotation scheme by consolidating and extending existing narratological theories, including Labov and Waletsky's (1967) functional categorization scheme and Freytag's (1863) pyramid of dramatic tension, and present 360 annotated short stories collected from online sources. In the future, this research will support an approach that enables systems to intelligently sustain complex communications with humans.

연구 동기 및 목표

• 기존 내러티브학 이론을 계산적 분석을 위한 일관된 프레임워크로 구체화하는 통합 어노테이션 체계를 개발하는 것.
• 단편 소설과 개인적 에피소드에서 고수준 내러티브 구조에 대한 계산적 이해의 격차를 해소하는 것.
• 방향성, 복잡성, 해결 등의 내러티브 구성 요소를 표준화하고 확장 가능한 프레임워크로 레이블링하는 것.
• 복잡하고 인간처럼 내러티브를 소통할 수 있는 시스템의 향후 개발을 지원하는 것.
• 연구를 위한 공개 가능한 360건의 어노테이션된 단편 소설과 에피소드 데이터셋을 제공하는 것.

제안 방법

• 저자들은 라보프와 바레츠키(1967)의 내러티브 기능적 분류 체계와 프라이타그(1863)의 드라마틱 피라미드 이론을 융합하여 종합적인 어노테이션 체계를 정의하였다.
• 어노테이션 체계는 드라마틱 긴장 곡선과 일치하는 방향성, 복잡성, 평가, 해결 등의 구조적 구성 요소를 포함한다.
• 팀은 다양한 장르와 내러티브 스타일을 확보하기 위해 온라인 자료에서 360편의 단편 소설과 개인적 에피소드를 수집하였다.
• 각 내러티브는 훈련된 어노테이터들이 제안된 체계를 사용해 어노테이션하였으며, 신뢰도를 확보하기 위해 이중 어노테이터 간 일致도를 측정하였다.
• 결과로 도출된 데이터셋은 내러티브 생성, 요약, 감성 분석 등의 후속 NLP 작업을 지원하도록 구성되어 있다.
• 이 프레임워크는 대화 시스템 및 기타 인간-컴퓨터 상호작용 응용 분야에 쉽게 확장하고 적응할 수 있도록 설계되었다.

실험 결과

연구 질문

• RQ1 기존의 내러티브학 이론은 어떻게 일관된 어노테이션 체계로 구체화되어 계산적 사용에 적합하게 만들 수 있는가?
• RQ2 단편 소설과 개인적 에피소드에서 일관되게 존재하는 구조적 구성 요소는 무엇이며, 이는 문학 이론과 어떻게 일치하는가?
• RQ3 통합된 어노테이션 프레임워크는 다양한 내러티브 유형 간 고수준 내러티브 구조를 얼마나 잘 포괄할 수 있는가?
• RQ4 이러한 어노테이션 프로세스는 대규모 내러티브 데이터셋에 대해 얼마나 신뢰성 있고 확장 가능한가?
• RQ5 이 어노테이션된 데이터셋이 내러티브 이해의 계산 모델 향상에 얼마나 잠재적 임무를 가질 수 있는가?

주요 결과

• 제안된 어노테이션 체계는 라보프와 바레츠키의 기능적 모델과 프라이타그의 드라마틱 긴장 피라미드를 유기적으로 통합한 일관된 프레임워크로 성공적으로 기능한다.
• 360건의 어노테이션된 내러티브로 구성된 데이터셋은 다양한 내러티브 유형에 걸쳐 어노테이션 체계가 일관되게 적용됨을 보여준다.
• 이중 어노테이터 간 일치도는 신뢰할 수 있는 수준에 도달하여 어노테이션 가이드라인의 명확성과 일관성을 검증한다.
• 이 데이터셋은 NLP에서 내러티브 이해 시스템의 훈련 및 평가를 위한 기초 자원을 제공한다.
• 기능적 내러티브와 드라마틱 내러티브 구조의 통합은 내러티브 진행과 감정 곡선에 대한 더 정교한 계산 모델링을 가능하게 한다.
• 이 연구는 인간과의 복잡한 내러티브 상호작용을 생성하고 이해하고 유지할 수 있는 시스템의 개발을 위한 길을 열어 놓는다.