[논문 리뷰] Electrotactile Feedback For Enhancing Contact Information in Virtual Reality

Sebastian Vizcay, Panagiotis Kourtesis외 3명|arXiv (Cornell University)|2021. 01. 01.

Tactile and Sensory Interactions참고 문헌 35인용 수 3

한 줄 요약

이 논문은 중공간 가상현실 상호작용 동안의 관통 깊이를 전달하기 위해 터치 펄스 주파수와 폭을 조절하는 웨어러블 전기자극 촉각 피드백 시스템을 제시한다. 21명의 참가자로 실시한 사용자 연구 결과, 전기자극 촉각 피드백은 접촉 정밀도와 정확도를 크게 향상시키며, 校정 후 사용자 숙련도가 향상된 후에는 시각 피드백과 유사한 성능을 보여, 이는 빛의 간섭과 인지적 부담을 줄이기 위해 시각 피드백을 대체할 수 있는 실용적인 비시각적 대안으로서의 가능성을 시사한다.

ABSTRACT

This paper presents a wearable electrotactile feedback system to enhance contact information for mid-air interactions with virtual objects. In particular, we propose the use of electrotactile feedback to render the interpenetration distance between the user's finger and the virtual content is touched. Our approach consists of modulating the perceived intensity (frequency and pulse width modulation) of the electrotactile stimuli according to the registered interpenetration distance. In a user study (N=21), we assessed the performance of four different interpenetration feedback approaches: electrotactile-only, visual-only, electrotactile and visual, and no interpenetration feedback. First, the results showed that contact precision and accuracy were significantly improved when using interpenetration feedback. Second, and more interestingly, there were no significant differences between visual and electrotactile feedback when the calibration was optimized and the user was familiarized with electrotactile feedback. Taken together, these results suggest that electrotactile feedback could be an efficient replacement of visual feedback for enhancing contact information in virtual reality avoiding the need of active visual focus and the rendering of additional visual artefacts.

연구 동기 및 목표

• 가상현실에서 중공간 가상 물체 상호작용 시 사용자가 물체를 관통하는 것을 인지하지 못하는 문제를 해결하기 위해 촉각 피드백의 부재를 해결한다.
• 접촉 정보를 위한 시각 피드백에 대한 의존도를 줄이기 위해, 이는 다른 가상 표면을 가림과 동시에 시각적 아티팩트를 유발할 수 있다.
• 전기자극 촉각 피드백이 관통 깊이를 효과적으로 전달하고 접촉 정확도 및 정밀도를 향상시키는지 평가한다.
• 통제된 사용자 연구에서 전기자극 촉각 피드백을 시각 피드백 및 병합 피드백과 비교한다.
• 사용자 숙련도와 校정이 전기자극 촉각 피드백의 효과성에 미치는 역할을 조사한다.

제안 방법

• 손끝에 전극를 배치하여 피부에 전기 자극을 제공하는 웨어러블 전기자극 장치를 설계하였다.
• 사용자의 손과 가상 물체 간 실시간 관통 거리에 따라 펄스 주파수와 펄스 폭 조절(PWM)을 사용해 전기자극 피드백의 강도를 조절하였다.
• 관통 거리는 사용자 손의 운동 추적과 가상 물체 충돌 검출을 통해 측정되었다.
• 네 가지 피드백 조건을 테스트하였다: 전기자극 전용, 시각 전용, 병합 시각-전기자극, 피드백 없음.
• 21명의 참가자가 참여한 사용자 연구에서 두 단계로 나누어 성능을 평가하였으며, 피드백 강도 최적화를 위해 단계 간 校정 조정을 실시하였다.
• 사용자 피부 도전도와 내성에 기반해 피드백 校정을 개선하였으며, 실험의 두 번째 단계 동안 적용되었다.

실험 결과

연구 질문

• RQ1 가상현실에서 중공간 상호작용 중 전기자극 촉각 피드백이 관통 깊이를 효과적으로 전달할 수 있는가?
• RQ2 전기자극 촉각 피드백은 시각 전용 피드백 또는 피드백 없음 조건보다 접촉 정밀도와 정확도를 향상시키는가?
• RQ3 사용자 숙련도가 전기자극 촉각 피드백에 대한 성능에 시간이 지남에 따라 미치는 영향은 어떠한가?
• RQ4 최적의 校정이 이루어진 후 전기자극 촉각 피드백은 시각 피드백만큼 효과적인가?
• RQ5 피드백 校정이 관통 깊이 렌더링에 있어 전기자극 촉각 피드백의 효과성에 어떤 역할을 하는가?

주요 결과

• 관통 피드백(전기자극 또는 시각)이 제공된 경우, 피드백 없음 조건에 비해 참가자들이 훨씬 높은 접촉 정밀도와 정확도를 달성하였다.
• 교정 및 사용자 숙련도 향상 후, 전기자극 피드백은 시각 피드백과 접촉 정확도 및 정밀도 측면에서 유사한 성능을 보였으며, 통계적으로 유의미한 차이는 없었다.
• 전기자극 전용 및 병합 피드백 조건에서 뚜렷한 학습 효과가 관찰되었으며, 실험의 첫 번째 단계에서 두 번째 단계로의 성능 향상이 있었다.
• 성능 향상 폭은 전기자극 조건에서 더 크게 나타났으며, 이는 전기자극 피드백의 신선함과 적응 과정이 성능 향상에 기여했음을 시사한다.
• 정확도 및 정밀도 향상 폭이 전기자극 피드백 조건에서 시각 피드백 조건보다 유의미하게 더 크게 나타나, 학습 효과가 일반적인 작업 연습 효과가 아니라 전기자극 피드백에 특화된 것으로 나타났다.
• 피드백 강도 값과 성능 지표 간에 상관관계가 없었으며, 이는 성능 향상이 자극 강도보다 사용자 적응에 의해 주로 이뤄졌음을 시사한다.