[논문 리뷰] Controlling wheelchairs by body motions: A learning framework for the adaptive remapping of space

Tauseef Gulrez, Alessandro Tognetti외 5명|arXiv (Cornell University)|2011. 07. 27.

Virtual Reality Applications and Impacts인용 수 8

한 줄 요약

이 논문은 상지신경손상 환자가 센서가 장착된 셔츠를 통해 상체 운동을 이용해 전동 휠체어를 제어할 수 있도록 하는 학습 프레임워크를 제시한다. 이는 적응형 재매핑을 통해 상체 운동을 이동 명령으로 변환한다. 시스템은 안전하고 반복 가능한 훈련을 위해 3차원 가상현실 환경을 사용하며, 시험 횟수가 증가함에 따라 궤적 오차가 크게 감소하는 것을 확인하여, 사용자 적응을 통한 신체 운동 기반 제어의 가능성을 입증한다.

ABSTRACT

Learning to operate a vehicle is generally accomplished by forming a new cognitive map between the body motions and extrapersonal space. Here, we consider the challenge of remapping movement-to-space representations in survivors of spinal cord injury, for the control of powered wheelchairs. Our goal is to facilitate this remapping by developing interfaces between residual body motions and navigational commands that exploit the degrees of freedom that disabled individuals are most capable to coordinate. We present a new framework for allowing spinal cord injured persons to control powered wheelchairs through signals derived from their residual mobility. The main novelty of this approach lies in substituting the more common joystick controllers of powered wheelchairs with a sensor shirt. This allows the whole upper body of the user to operate as an adaptive joystick. Considerations about learning and risks have lead us to develop a safe testing environment in 3D Virtual Reality. A Personal Augmented Reality Immersive System (PARIS) allows us to analyse learning skills and provide users with an adequate training to control a simulated wheelchair through the signals generated by body motions in a safe environment. We provide a description of the basic theory, of the development phases and of the operation of the complete system. We also present preliminary results illustrating the processing of the data and supporting of the feasibility of this approach.

연구 동기 및 목표

• 기존 조이스틱을 사용한 전동 휠체어 제어 방식에서 상지신경손상 환자가 겪는 학습 곤란 문제를 해결하기 위해.
• 잔존하는 상체 운동 기능을 활용해 직관적인 휠체어 제어를 위한 신체-기계 인터페이스를 개발하기 위해.
• 모터 학습과 인지 지ap 형성에 기여하는 안전하고 몰입감 있는 3차원 가상현실 환경을 제공하기 위해.
• 사용자 능력과 성과에 따라 진화하는 신체 운동에서 휠체어 명령으로의 적응형 재매핑을 가능하게 하기 위해.
• 운동 기능이 제한된 사용자에게 훈련 위험을 줄이고 사용성을 향상시키기 위해.

제안 방법

• 상체 운동(예: 어깨 및 팔 움직임)을 실시간으로 측정하기 위해 웨어러블 센서가 장착된 셔츠를 사용한다.
• 신체 운동 신호는 동적이고 적응형 변환을 통해 휠체어 제어 명령(전진, 후진, 좌회전, 우회전)으로 매핑된다.
• 개인용 증강현실 몰입형 시스템(PARIS)은 안전하고 반복 가능한 훈련을 위한 3차원 가상현실 환경을 제공한다.
• 시스템은 사용자 성과와 학습 진도에 따라 제어 매핑을 지속적으로 적응시킨다.
• 궤적 정확도는 두 가지 지표를 사용해 평가된다: 이동 거리(Dist)와 설정 경로와 실제 경로 사이의 오차 영역(Ediff).
• 사용자 훈련은 단계별 접근 방식을 따르며, 제어 전략에 대한 초도 숙련 후 가상 공간 내 경로 추적 작업이 이어진다.

실험 결과

연구 질문

• RQ1 상지신경손상 환자가 잔존하는 상체 운동만을 사용하여 전동 휠체어를 제어할 수 있는가?
• RQ2 가상현실 훈련에서의 성능은 시뮬레이션 환경에서의 경로 추적 정확도와 어떻게 관련이 있는가?
• RQ3 적응형 학습 기반 인터페이스는 반복 시험을 거치며 제어 정확도를 향상시킬 수 있는가?
• RQ4 운동-제어 매핑의 점진적 적응을 통해 사용자 오류는 어느 정도 감소하는가?
• RQ5 가상현실의 사용은 실제 세계 훈련에 비해 학습의 안전성과 효과를 크게 향상시키는가?

주요 결과

• 시험 횟수가 증가함에 따라 궤적 오차가 단조롭게 감소하는 경향을 보여, 제어 인터페이스에 대한 점진적 학습과 적응이 이루어졌음을 시사한다.
• 첫 번째, 두 번째, 세 번째 시험 사이에서 거리 오차와 오차 영역(Ediff)이 급격히 감소하여 초기 학습 속도가 매우 빠름을 확인하였다.
• 어깨 및 팔 움직임만을 사용하여도 정확한 경로 추적을 성공적으로 수행하였으며, 이는 시험 횟수가 증가함에 따라 Ediff 및 Dist 값이 감소함으로써 뒷받침된다.
• 가상현실 환경은 신체 운동과 공간 주행 간의 새로운 인지 지도 형성에 효과적으로 기여하였다.
• 적응형 재매핑 프레임워크는 사용자별 운동 능력에 맞게 조정 가능하여 시간이 지남에 따라 제어 효율성이 향상되었다.
• 초기 결과는 센서 셔츠를 통한 휠체어 제어의 가능성을 확인하였으며, VR 기반 훈련이 모터 학습에 효과적이라는 것을 입증한다.