[논문 리뷰] Laying Down the Yellow Brick Road: Development of a Wizard-of-Oz Interface for Collecting Human-Robot Dialogue

Claire Bonial, Matthew Marge외 12명|arXiv (Cornell University)|2017. 10. 17.

Social Robot Interaction and HRI인용 수 9

한 줄 요약

이 논문은 원격으로 물리적으로 위치한 태스크에서 자연스러운 인간-로봇 대화를 수집하기 위해 맞춤형 워즈더오즈(Wizard-of-Oz, WoZ) 인터페이스를 제안한다. 사전 정의된 발화 템플릿을 사용하는 그래픽 인터페이스를 통해 시스템은 더 빠르고 자연스러운 대화 속도를 가능하게 하며, 강력한 도메인 커버리지를 달성하여 인간-로봇 협업 시나리오에서 자동 대화 시스템을 훈련하는 데의 타당성을 입증한다.

ABSTRACT

We describe the adaptation and refinement of a graphical user interface designed to facilitate a Wizard-of-Oz (WoZ) approach to collecting human-robot dialogue data. The data collected will be used to develop a dialogue system for robot navigation. Building on an interface previously used in the development of dialogue systems for virtual agents and video playback, we add templates with open parameters which allow the wizard to quickly produce a wide variety of utterances. Our research demonstrates that this approach to data collection is viable as an intermediate step in developing a dialogue system for physical robots in remote locations from their users - a domain in which the human and robot need to regularly verify and update a shared understanding of the physical environment. We show that our WoZ interface and the fixed set of utterances and templates therein provide for a natural pace of dialogue with good coverage of the navigation domain.

연구 동기 및 목표

• 원격으로 물리적으로 위치한 태스크에서 인간-로봇 대화를 수집하기 위한 확장 가능하고 사용자 우호적인 워즈더오즈 인터페이스 개발
• 로봇 주행 맥락에서 자연어 패턴을 캡처하여 자동 대화 시스템 훈련 지원
• 구조화된 템플릿 기반 응답 생성을 통해 워즈더오즈의 인지 부담을 줄이고 대화 속도를 향상
• 다양한 사용자 전략에서 일관되고 도메인 커버리지가 보장된 발화를 유도하는 인터페이스의 효과성 검증
• 인간-워즈더오즈 기반 데이터 수집에서 자동 대화 관리 및 로봇 주행 계획으로의 전환 경로 제공

제안 방법

• 대화 관리 워즈더오즈(대화 관리 워즈더오즈, DM-Wizard)와 로봇 주행 제어 워즈더오즈(로봇 주행 제어 워즈더오즈, RN-Wizard)를 포함한 이중 워즈더오즈 설정을 사용한다.
• DM-Wizard는 고정된 발화 템플릿을 사용하는 그래픽 인터페이스를 통해 주행 명령 및 피드백에 대해 신속하고 일관된 응답 생성을 가능하게 한다.
• 거리, 물체 이름 등 개방형 매개변수를 지원함으로써 다양한 주행 지시에 일반화 가능하다.
• 프리라이트 테스트를 기반으로 반복적으로 개선하여 사용성과 대화 흐름을 향상시킨다.
• 참가자들이 가정 유사 환경에서 원격 로봇을 지시하는 상황에서 두 조건(자유 응답 모드 및 GUI 기반 응답 모드)에서 데이터를 수집한다.
• 완료 피드백(예: '완료', '전송됨')을 사용해 대화 속도와 작업 진행 상황을 대체 지표로 활용한다.

실험 결과

연구 질문

• RQ1 템플릿 기반 응답을 갖춘 WoZ 인터페이스는 원격 인간-로봇 상호작용에서 더 빠르고 자연스러운 대화 속도를 지원할 수 있는가?
• RQ2 고정된 템플릿 세트가 물리적으로 기반을 둔 도메인에서 다양한 주행 관련 발화에 충분한 커버리지를 제공하는가?
• RQ3 자유 응답 모드와 비교해 구조화된 인터페이스는 대화 일관성과 참가자의 작업 성과 측면에서 어떤가?
• RQ4 고품질의 자연스러운 청각 대화를 유지하면서 워즈더오즈의 인지 부담은 어느 정도 감소할 수 있는가?
• RQ5 이 WoZ 설정에서 수집된 데이터는 자동 대화 시스템을 위한 로봇 주행 훈련에 효과적으로 활용될 수 있는가?

주요 결과

• 실험 2의 GUI 기반 응답 모드에서 완료 피드백 사례가 1069건 발생한 반면, 실험 1에서는 829건으로, 더 빠른 대화 속도와 높은 작업 처리량을 나타낸다.
• 실험 2 참가자들은 워즈더오즈가 템플릿을 통해 신속하고 일관된 응답을 제공함으로써 더 자연스럽고 터닝 테이킹 방식의 대화에 참여했다.
• 인터페이스는 다양한 사용자 전략에 대해 일반화 성공을 보였으며, 매개변수화된 템플릿을 통해 '앞으로 이동'과 같은 개방형 명령어에 대해 일관된 응답을 제공했다.
• 템플릿 사용으로 모호성이 감소하고 응답의 명확성이 향상되어 참가자가 반복적인 확인을 요청할 필요가 줄었다.
• 수집된 데이터는 이동, 물체 탐색, 피드백 공유 등 주행 도메인의 강력한 커버리지를 보여주었다.
• 이 인터페이스는 인간-워즈더오즈 기반 데이터 수집에서 자동 대화 시스템 개발으로의 전환을 효과적으로 지원하는 것으로 입증되었다.