[논문 리뷰] Where's My Drink? Enabling Peripheral Real World Interactions While Using HMDs

Pulkit Budhiraja, Rajinder Singh Sodhi외 4명|arXiv (Cornell University)|2015. 02. 16.

Virtual Reality Applications and Impacts참고 문헌 9인용 수 23

한 줄 요약

이 논문은 헤드셋 디스플레이(HMD)를 통해 스테레오 카메라를 사용하여 물리 세계의 요소—손, 물체, 환경 경계 등—을 선택적으로 가상현실(VR)에 통합하는 혼합현실 렌더링 기법을 제안한다. 이는 몰입감을 해치지 않으면서 주변 상호작용을 향상시킨다. 사용자의 손, 대상 물체, 물리 환경의 주목할 만한 경계를 표시하는 '물체 및 손의 맥락(Object & Hands with Context, OHC)' 렌더링 기법이 가장 효과적인 것으로 밝혀졌으며, 이는 사용자 만족도, 몰입감, 상호작용 용이성 향상에 기여했고, 높은 몰입감을 유지했다.

ABSTRACT

Head Mounted Displays (HMDs) allow users to experience virtual reality with a great level of immersion. However, even simple physical tasks like drinking a beverage can be difficult and awkward while in a virtual reality experience. We explore mixed reality renderings that selectively incorporate the physical world into the virtual world for interactions with physical objects. We conducted a user study comparing four rendering techniques that balances immersion in a virtual world with ease of interaction with the physical world. Finally, we discuss the pros and cons of each approach, suggesting guidelines for future rendering techniques that bring physical objects into virtual reality.

연구 동기 및 목표

• 몰입형 HMD 착용 중에 음료를 마시는 것과 같은 단순한 신체 작업을 수행하는 데 어려움을 겪는 문제를 해결하기 위해.
• 가상 환경에 물리 세계의 요소를 선택적으로 통합하는 혼합현실 렌더링의 설계 공간을 탐색하여, 맥락 전환과 몰입 감소를 줄이기 위해.
• 다양한 VR 장르(예: 영화, FPS, 레이싱 게임)에서 물리 요소의 렌더링에 대한 시각적 정밀도와 렃치 전략이 사용자 경험에 미치는 영향을 평가하기 위해.
• 물리 세계에 대한 인지와 지속적인 몰입감을 균형 잡는 최적의 렌더링 기법을 규명하기 위해.

제안 방법

• 사용자의 손과 주변 물체를 포함한 물리 환경의 실시간 스테레오 영상을 촬영하기 위해 이중 웹캠 시스템을 구현했다.
• 네 가지의 서로 다른 렌더링 기법을 구현: (1) 물체 및 손(OH), (2) 물체, 손, 경계(OHC), (3) 실제 세계 창(Windowed, RWW), (4) 물리적 피처 인 풋플리터(PPIP).
• 물리 세계 데이터를 가상 환경에 하나의 공간 척도를 기반으로 통합하여 자연스러운 인지와 체감 운동 감각을 유지했다.
• 세 가지 VR 경험(영화, 1인칭 슈팅 게임, 레이싱 게임)에서 18명의 참가자를 대상으로 사용자 연구를 수행하여 네 가지 렌더링 기법을 비교했다.
• 전반적인 만족도, 몰입감, 몰입감, 산만함, 플레이 용이성에 대한 정량적 평가(7점 척도)와 정성적 피드백을 수집했다.
• 조건 간 및 VR 장르 간 통계적 비교를 통해 성능 추세와 사용자 선호도를 분석했다.

실험 결과

연구 질문

• RQ1 어느 렌더링 기법이 VR에서 몰입감을 유지하면서도 주변 물리 세계 상호작용(예: 음료를 찾는 것)을 가장 잘 지원하는가?
• RQ2 다양한 수준의 시각적 정밀도와 공간 배치 전략(예: 창 레이아웃 vs. 피처 인 풋플리터)이 사용자 인지의 몰입감과 산만함에 어떤 영향을 미치는가?
• RQ3 각 렌더링 기법의 효과성이 다양한 VR 경험 유형(예: 낮은 참여도의 영화 vs. 높은 참여도의 FPS)에서 어떻게 다를까?
• RQ4 주변 표면의 경계와 같은 맥락적 시각 정보가 사용자 방향 감각 상실을 줄이고 상호작용 정확도를 향상시키는 데 어떤 역할을 하는가?
• RQ5 HMD를 사용할 때 물리 세계 인지와 몰입감 사이의 상충 관계를 사용자가 어떻게 인지하는가?

주요 결과

• 물체 및 손의 맥락(OHC) 렌더링은 모든 VR 경험에서 전반적인 만족도, 몰입감, 몰입감, 플레이 용이성 측면에서 가장 높은 순위를 기록했다.
• 손, 대상 물체, 환경의 주목할 만한 경계를 표시하는 OHC 렌더링은 다른 방법보다 물리적 물체(예: 컵)를 더 빨리, 더 자신감 있게 찾아내고 상호작용할 수 있도록 했다.
• 물체 및 손(OH) 렌더링은 최소한의 정보를 제공함에도 불구하고 전체적으로 두 번째로 높은 순위를 기록했지만, 일부 사용자는 방향 감각 상실과 물체 탐색 곤란을 보고했다.
• 실제 세계 창(Windowed, RWW) 및 물리적 피처 인 풋플리터(PPIP) 렌더링은 몰입감을 해친다고 평가되었으며, 사용자들은 '공허한 상태'를 느끼고 가상 세계와의 연결감이 줄어들었다고 설명했다.
• HMD를 들어 올리는 것은 가장 선호되지 않는 방법이었으며, 사용자들은 이가 몰입감을 깨고 VR 경험에 방해가 된다고 명시적으로 밝혔다.
• 사용자들은 일대일 공간 스케일링과 자기 중심 시점 렌더링을 선호했으며, 이는 자연스러운 인지와 물리적 상호작용 중 인지 부담 감소에 기여했다.