[논문 리뷰] Towards Assistive Feeding with a General-Purpose Mobile Manipulator

Daehyung Park, You Keun Kim외 2명|arXiv (Cornell University)|2016. 05. 25.

Modular Robots and Swarm Intelligence참고 문헌 19인용 수 33

한 줄 요약

이 논문은 PR2 로봇을 사용하여 자율적 보조 식사 제공을 위한 웹 기반 일반 목적의 이동형 조작 시스템을 제시한다. 떠넘기기 및 제공 행동을 통합하고 다중 모odal 이상 탐지 기술을 적용하였다. 건강한 참가자들과 경련마비 환자에게 평가한 결과, 떠넘기기 성공률는 94.8%이며, 제공 성공률는 98.8%를 기록하였다. 사용자들은 시스템의 사용성과 안전성에 대해 높은 평가를 내렸으며, 실생활 보조 응용 분야에서의 실현 가능성을 입증하였다.

ABSTRACT

General-purpose mobile manipulators have the potential to serve as a versatile form of assistive technology. However, their complexity creates challenges, including the risk of being too difficult to use. We present a proof-of-concept robotic system for assistive feeding that consists of a Willow Garage PR2, a high-level web-based interface, and specialized autonomous behaviors for scooping and feeding yogurt. As a step towards use by people with disabilities, we evaluated our system with 5 able-bodied participants. All 5 successfully ate yogurt using the system and reported high rates of success for the system's autonomous behaviors. Also, Henry Evans, a person with severe quadriplegia, operated the system remotely to feed an able-bodied person. In general, people who operated the system reported that it was easy to use, including Henry. The feeding system also incorporates corrective actions designed to be triggered either autonomously or by the user. In an offline evaluation using data collected with the feeding system, a new version of our multimodal anomaly detection system outperformed prior versions.

연구 동기 및 목표

• 기능 장애가 있는 사람들을 위해 직관적이고 안전한 일반 목적의 이동형 조작 시스템을 개발하는 것.
• 고수준의 웹 기반 인터페이스를 통합하여 복잡한 로봇 시스템의 사용성 문제를 해결하는 것.
• 경련마비와 같은 심한 운동 기능 장애가 있는 개인이 원격으로 조작할 수 있도록 하는 것.
• 실시간 장애 탐지에 적합한 은닉 마르코프 모델(HMM)과 서포트 벡터 머신(SVM)을 융합한 고급 이상 탐지 기술을 통해 시스템 신뢰성을 향상시키는 것.

제안 방법

• 로봇은 3차원 센싱을 위한 Kinect V2와 사용자 머리에 부착된 ARTag를 통해 입 위치를 추정하는 PR2 로봇을 사용한다.
• 유한 상태 기반 기계가 떠넘기기 및 제공 작업을 조율하며, 사용자 피드백과 이상 탐지 결과에 따라 상태 전환을 유도한다.
• 상호작용 중 안전성을 확보하기 위해 저감도 인터페이스 제어를 적용한다.
• 센서 데이터에서 이상을 분류하기 위해 은닉 마르코프 모델(HMM)과 서포트 벡터 머신(SVM)을 융합한 다중 모달 이상 탐지기법을 사용한다.
• 자율적 또는 사용자 입력에 의해 유도되는 수정 조치가 시스템에 통합되어 있다.
• 웹 기반 GUI를 통해 헤드 트래커와 마우스를 사용한 원격 제어가 가능하며, 작업 시작, 일시정지, 피드백 제공 기능을 지원한다.

실험 결과

연구 질문

• RQ1 PR2와 같은 일반 목적의 이동형 조작 시스템이 최소한의 사용자 훈련으로 자율적 보조 식사 제공에 효과적으로 활용될 수 있는가?
• RQ2 기능 장애가 있는 사람들을 대상으로 웹 기반 인터페이스가 전통적 제어 방법에 비해 사용성 측면에서 어떻게 비교되는가?
• RQ3 HMM과 SVM을 융합한 다중 모달 이상 탐지 시스템이 이전의 임계값 기반 방법에 비해 로봇 작업 실패를 더 잘 탐지할 수 있는가?
• RQ4 심한 경련마비 환자가 원격으로 로봇 식사 제공 시스템을 성공적으로 운영할 수 있는 정도는 어느 정도인가?
• RQ5 실생활 시험에서 사용자들은 로봇 식사 제공 시스템의 안전성, 편안함, 속도에 대해 어떻게 평가하는가?

주요 결과

• 건강한 참가자 5명 전원이 식사 작업을 성공적으로 완료하였으며, 떠넘기기 성공률는 94.8%, 제공 성공률는 98.8%를 기록하였다.
• 참가자들은 높은 사용성을 보고하였으며, 80%가 시스템이 사용하기 쉽다고 강하게 동의했고, 80%는 운영 중 안전하다고 느꼈다.
• 경련마비가 심한 헨리 에반스는 캘리포니아에서 원격으로 건강한 참가자를 대상으로 식사 제공을 성공적으로 수행하였다.
• HMM-SVM 이상 탐지 방법은 이전의 임계값 기반 접근 방식보다 우수한 성능을 보였으며, 떠넘기기 및 제공 작업 모두에서 ROC 곡선 성능이 뛰어났다.
• 헤드 에반스를 통한 원격 운영 능력이 검증되었으며, 그는 높은 사용성에 대해 긍정적인 평가를 내리고 현장 테스트에 대비할 준비가 되어 있다고 밝혔다.
• 참가자들은 평균 1회 떠넘기기 당 약 2분의 작업 시간이 걸리며, 속도와 편안함 향상이 향후 개선이 필요한 영역으로 지목되었다.