[논문 리뷰] Applying the Wizard-of-Oz Technique to Multimodal Human-Robot Dialogue

Matthew Marge, Claire Bonial외 5명|arXiv (Cornell University)|2017. 03. 10.

Social Robot Interaction and HRI참고 문헌 3인용 수 26

한 줄 요약

이 논문은 다중모달 인간-로봇 대화에 워즈드-오브-오즈(Wizard-of-Oz, WOz) 방법을 적용하여 협업 탐색 작업을 수행한다. 두 명의 워즈드가 로봇 주행과 대화 관리 기능을 시뮬레이션한다. 연구는 워즈드 역할을 분리하는 것이 가능하고 효과적이며, 자연스러운 인간-로봇 상호작용 데이터 수집에 기여함을 보여주며, 향후 더 직관적인 로봇 통신 시스템 개발을 지원한다.

ABSTRACT

Our overall program objective is to provide more natural ways for soldiers to interact and communicate with robots, much like how soldiers communicate with other soldiers today. We describe how the Wizard-of-Oz (WOz) method can be applied to multimodal human-robot dialogue in a collaborative exploration task. While the WOz method can help design robot behaviors, traditional approaches place the burden of decisions on a single wizard. In this work, we consider two wizards to stand in for robot navigation and dialogue management software components. The scenario used to elicit data is one in which a human-robot team is tasked with exploring an unknown environment: a human gives verbal instructions from a remote location and the robot follows them, clarifying possible misunderstandings as needed via dialogue. We found the division of labor between wizards to be workable, which holds promise for future software development.

연구 동기 및 목표

• 군사적 맥락에서 인간 간 소통 방식을 그대로 반영하는 더 자연스러운 인간-로봇 상호작용 방법을 개발하기 위해.
• 다중모달 인간-로봇 대화 시나리오에서 워즈드-오브-오즈 방법의 타당성을 조사하기 위해.
• 로봇 주행 및 대화 관리 구성 요소를 시뮬레이션하는 이중 워즈드 설정을 평가하기 위해.
• 훈련 및 평가를 위한 인간-로봇 대화 시스템에 적합한 고품질의 자연스러운 상호작용 데이터를 수집하기 위해.
• 협업 작업 중 실시간으로 구두 지시를 이해하고 응답할 수 있는 로봇 시스템 개발을 지원하기 위해.

제안 방법

• 이중 워즈드 설정을 사용하여, 한 명의 워즈드가 로봇 주행을 제어하고 다른 한 명이 대화 응답을 관리한다.
• 참가자들은 원격 위치에서 로봇과 협업 탐색 작업을 수행하며 음성 명령을 내렸다.
• 로봇은 지시를 명확히 하기 위해 또는 상태를 보고하기 위해 음성으로 응답하여 실시간 대화를 시뮬레이션했다.
• 상황은 알려지지 않은 환경을 탐색하는 것을 포함했으며, 음성 명령과 로봇 동작 간의 협력이 필요했다.
• 2016년 IEEE RO-MAN 컨ference에서 실시한 라이브 세션 동안 제어된 상호작용 환경을 통해 데이터를 수집했다.
• WOz 프레임워크를 통해 연구자들은 완전한 자율적 실행 없이도 복잡한 로봇 행동을 시뮬레이션할 수 있었다.

실험 결과

연구 질문

• RQ1 이중 워즈드 설정이 인간-로봇 상호작용에서 주행 및 대화 관리의 통합을 효과적으로 시뮬레이션할 수 있는가?
• RQ2 협업 탐색 작업에서 WOz 방법을 사용할 경우 인간-로봇 상호작용은 얼마나 자연스럽고 효과적인가?
• RQ3 다중모달 대화 시스템에서 주행과 대화 관리 기능을 나누는 데 따른 과제와 이점은 무엇인가?
• RQ4 WOz 방법은 로봇 훈련을 위한 현실적이고 활용 가능한 상호작용 데이터 수집을 어느 정도 지원하는가?
• RQ5 이중 워즈드가 음성 및 주행 행동을 모두 시뮬레이션할 경우 사용자는 로봇의 반응을 어떻게 인식하고 적응하는가?

주요 결과

• 주행과 대화를 담당하는 두 명의 워즈드 간 역할 분담이 자연스러운 인간-로봇 상호작용을 시뮬레이션하는 데 실현 가능하고 효과적임이 확인되었다.
• 참가자들은 필요한 경우 로봇이 명확한 응답을 제공하는 것을 바탕으로 음성 명령을 사용하여 탐색 작업을 성공적으로 완료했다.
• WOz 설정을 통해 제어된 조건에서 자연스럽고 다중모달의 상호작용 데이터를 수집할 수 있었다.
• 이중 워즈드 접근법은 향후 자동화를 위한 복잡한 로봇 행동의 프로토타이핑 및 평가에 실현 가능성을 보여주었다.
• 이 방법은 인간-로봇 대화에서의 핵심 상호작용 패턴과 실패 유형을 식별하는 데 기여했다.
• 본 연구는 WOz 기법이 다중모달 인간-로봇 대화 시스템 개발을 위한 여전히 타당하고 유용한 접근법임을 확인한다.