[논문 리뷰] Conversational Browsing

Svitlana Vakulenko, Vadim Savenkov외 1명|arXiv (Cornell University)|2020. 12. 07.

Speech and dialogue systems인용 수 4

한 줄 요약

이 논문은 사용자가 명시적인 질의를 수립할 필요 없이 자연스럽고 상호작용적인 대화를 통해 구조화된 정보 소스(예: 데이터베이스 또는 지식 그래프)를 탐색하고 탐색할 수 있도록 하는 새로운 패러다임인 대화형 브라우징을 소개한다. 저자들은 사용자-시스템 상호작용을 요소와 실체에 대한 동적이고 피드백 기반의 탐색으로 모델링함으로써, 정보 필요성이 모호하거나 명확하지 않은 상황에서 기존의 질의 기반 접근 방식보다 우수한 성능을 보이는 프로토타입 시스템을 개발하였다. 이는 대화형 브라우징이 보편적인 상호작용 모델로서의 가능성을 입증한다.

ABSTRACT

How can we better understand the mechanisms behind multi-turn information seeking dialogues? How can we use these insights to design a dialogue system that does not require explicit query formulation upfront as in question answering? To answer these questions, we collected observations of human participants performing a similar task to obtain inspiration for the system design. Then, we studied the structure of conversations that occurred in these settings and used the resulting insights to develop a grounded theory, design and evaluate a first system prototype. Evaluation results show that our approach is effective and can complement query-based information retrieval approaches. We contribute new insights about information-seeking behavior by analyzing and providing automated support for a type of information-seeking strategy that is effective when the clarity of the information need and familiarity with the collection content are low.

연구 동기 및 목표

• 탐색적 검색 맥락에서 다단계 대화 기반 정보 탐색 대화의 메커니즘을 이해하는 것.
• 사용자가 사전에 정확한 질의를 수립할 필요 없이 구조화된 정보 소스를 탐색할 수 있도록 지원하는 대화 시스템을 설계하는 것.
• 실제 인간 대화 데이터를 기반으로 한 대화형 브라우징 모델을 개발하고 평가하며, 사용자 제어 및 인지 부하 관리에 초점을 맞추는 것.
• 상호작용 중심의 스토리텔링 원칙을 적용하여 사용자를 동적으로 반응적으로 정보 소스 안내하는 방법을 탐색하는 것.
• 기존의 질문-답변 시스템과 보완적인 대화형 탐색적 검색의 기초를 마련하는 것.

제안 방법

• 저자들은 참가자가 중개자와 함께 구조화된 정보 소스(데이터베이스 테이블)를 탐색하는 제어된 실험실 연구에서 수집한 인간 간 대화 텍스트를 분석하였다.
• 관찰된 상호작용 패턴을 바탕으로 사용자 중심의 주제 전환과 피드백 기반 탐색을 강조하는 대화형 브라우징의 기반 이론을 도출하였다.
• 사용자 피드백에 따라 시스템이 동적으로 필터와 실체를 노출함으로써 명시적 질의 없이 탐색을 이끄는 상호작용 프로세스로 대화형 브라우징 모델을 정형화하였다.
• 이 모델은 사용자 선호도와 인지 부하에 적응하는 탐색 제어 기능을 지원하는 프로토타입 대화 시스템으로 구현되었다.
• 기존의 요청-응답 기반 대화형 검색 시스템과의 비교를 위해 사용자 연구를 수행하였으며, 정보 필요성이 모호하거나 명확하지 않은 목표 하에서의 정보 만족도를 측정하였다.
• 시스템은 사용자 발화를 데이터 구조 내 탐색 행동으로 매핑하기 위해 의미 해석 및 정보 검색 기법을 사용하며, 브라우징과 질의 간 원활한 전환을 가능하게 한다.

실험 결과

연구 질문

• RQ1 사용자의 정보 필요성이 모호하거나 암묵적인 상황에서, 사용자가 구조화된 정보 소스를 자연스럽게 탐색하고 소통하는 방식은 어떻게 되는가?
• RQ2 질의 수립 없이 한 당사자가 다른 당사자를 데이터 소스 안내하는 인간 간 대화에서 나타나는 상호작용 패턴은 무엇인가?
• RQ3 피드백 기반의 동적 탐색을 지원하는 대화 시스템이 기존의 질의 기반 시스템에 비해 탐색적 검색에서 정보 접근에 효과적인가?
• RQ4 대화형 브라우징을 다양한 도메인과 데이터 구조에 적용 가능한 일반 모델로 정형화할 수 있는가?
• RQ5 사용자 제어와 인지 부하 조절은 효과적인 대화형 브라우징에서 어떤 역할을 하는가?

주요 결과

• 대화형 브라우징 모델은 사용자의 정보 필요성에 대한 명확성 부족이나 도메인 용어에 대한 낯설음이 있는 상황에서도 정보 접근을 효과적으로 지원한다.
• 평가 결과, 대화형 브라우징 시스템은 효과적이며, 특히 탐색적 검색 작업에서 기존의 질의 기반 정보 검색 접근 방식과 보완적으로 기능할 수 있음을 입증한다.
• 사용자는 명시적 질의 수립에만 의존하는 것보다는 상호작용적이고 피드백 기반의 대화를 통해 안내받을 때 더 높은 참여도와 만족도를 보였다.
• 시스템이 사용자 피드백에 따라 탐색 경로를 동적으로 조정함으로써 데이터 소스 내 관련 정보 서브셋을 더 효율적으로 탐색할 수 있었다.
• 이 연구는 사용자가 정확한 질의를 명시할 준비가 되어 있지 않은 경우, 질문-답변 시스템에 비해 대화형 브라우징이 대안으로 유의미함을 확인한다.
• 프로토타입은 브라우징과 질의 간 원활한 전환을 성공적으로 지원하여 하이브리드 인터페이스가 미래의 유망한 방향임을 시사한다.