[논문 리뷰] Virtual Lenses as Embodied Tools for Immersive Analytics

Sven Kluge, Stefan Gladisch외 3명|arXiv (Cornell University)|2019. 11. 22.

Virtual Reality Applications and Impacts참고 문헌 25인용 수 4

한 줄 요약

이 논문은 가상의 손으로 만질 수 있는 렌즈를 가상현실에서의 몰입형 3D 분석을 위한 몸으로 느끼는 상호작용 도구로 도입하여, 사용자가 손짓을 통해 자연스럽게 렌즈를 생성하고 조작하며 결합할 수 있도록 한다. 이는 복잡한 수중 레이더 데이터를 탐색하는 데 기여한다. 100명 이상의 참가자로부터의 사용자 피드백은 이 접근 방식이 직관적이고 몰입감 있는 데이터 분석을 가능하게 하며, 복합 렌즈 효과를 통해 매몰된 선박의 잔해를 성공적으로 드러내었다고 나타낸다.

ABSTRACT

Interactive lenses are useful tools for supporting the analysis of data in different ways. Most existing lenses are designed for 2D visualization and are operated using standard mouse and keyboard interaction. On the other hand, research on virtual lenses for novel 3D immersive visualization environments is scarce. Our work aims to narrow this gap in the literature. We focus particularly on the interaction with lenses. Inspired by natural interaction with magnifying glasses in the real world, our lenses are designed as graspable tools that can be created and removed as needed, manipulated and parameterized depending on the task, and even combined to flexibly create new views on the data. We implemented our ideas in a system for the visual analysis of 3D sonar data. Informal user feedback from more than a hundred people suggests that the designed lens interaction is easy to use for the task of finding a hidden wreck in sonar data.

연구 동기 및 목표

• 3D 몰입형 분석 환경에서 상호작용 렌즈를 위한 자연스럽고 몸으로 느끼는 상호작용 기법의 부족을 해결하기 위해.
• 가상 렌즈를 VR에서 실물처럼 만지고 다룰 수 있는 도구로 설계하여 직접적이고 원거리 조작을 지원하기 위해.
• 공간 데이터 분석에서 집중+맥락 시각화를 향상시키기 위해 렌즈의 조합 및 파rameter화를 유연하게 가능하게 하기 위해.
• 다양한 참가자를 대상으로 한 비공식적인 사용자 테스트를 통해 렌즈 상호작용 설계의 사용성과 직관성 평가하기 위해.
• 신체화와 다중 모odal 피드백(시각적, 촉각적, 청각적)이 가상현실 분석에서 사용자의 몰입감과 작업 성과에 어떤 영향을 미치는지 탐색하기 위해.

제안 방법

• 가상 렌즈는 오culus 릭스를 사용한 유니티 기반의 VR 시스템에서 투명하고 손으로 만질 수 있는 3D 도구로 구현된다.
• 사용자는 손짓을 통해 렌즈를 생성하며, 인덱스 손가락을 사용해 직접 조작하고, 둥근 메뉴를 통해 렌즈 생성 및 설정을 조작한다.
• 사용자의 신체적 도달 범위를 넘어서도 렌즈를 제어할 수 있도록 원거리 렌즈 프록시를 제공하여 상호작용의 유연성을 유지한다.
• 렌즈는 동적 파rameter화를 지원하며, 공간적으로 결합 가능하며, 겹치는 영역에 동시에 여러 가지 시각적 효과를 적용할 수 있다.
• 사용자 행동을 강화하고 몰입감을 높이기 위해 다중 모odal 피드백(시각적, 촉각적, 청각적)을 통합한다.
• 시스템은 실시간 볼륨 렌더링과 렌즈 기반의 대체 시각화를 위해 고해상도 3D 수중 레이더 데이터(512×256×256)를 처리한다.

실험 결과

연구 질문

• RQ1 3D 몰입형 분석 환경에서 상호작용 렌즈를 어떻게 설계하여 자연스럽고 몸으로 느끼는 상호작용을 지원할 수 있는가?
• RQ2 손으로 만질 수 있는 가상 렌즈는 복잡한 3D 데이터를 탐색할 때 사용자의 직관성과 작업 성과를 어느 정도 향상시키는가?
• RQ3 여러 렌즈의 조합은 수중 레이더 데이터에서 매몰된 선박의 잔해와 같은 숨겨진 데이터 특징을 발견하는 데 어떻게 기여하는가?
• RQ4 다중 모odal 피드백(촉각, 청각, 시각)은 사용자의 몰입감 유지와 상호작용 정확도에 어떤 역할을 하는가?
• RQ5 다양한 가상현실 경험 수준을 가진 사용자는 가상 렌즈 상호작용 기법을 어떻게 적응하고 활용하는가?

주요 결과

• 다양한 배경을 가진 100명 이상의 사용자가 가상 렌즈 상호작용이 직관적이고 쉽게 익힐 수 있다고 보고했으며, 가상현실 경험 여부와 관계없이 사용 가능했다.
• 사용자들은 자주 렌즈를 겹쳐서 조합하려는 경향을 보였으며, 이는 자연스러운 기대와 몰입감 향상과 일치함을 시사한다.
• 최대 강도 투영과 첫 번째 도함수 렌즈의 조합을 통해 이전에 드러나지 않았던 0.5m 아래의 매몰된 나무 선박의 잔해를 발견하여, 이 방법의 분석적 가치를 입증했다.
• 가상현실 경험을 가진 사용자들은 인덱스 손가락으로 렌즈를 잡는 동작을 어려워했으며, 이에 따라 접근성을 높이기 위해 중지로 렌즈를 잡는 모드를 추가했다.
• 렌즈 생성을 위한 둥근 메뉴는 실수로 활성화되기 쉬웠으며, 이는 복잡한 상호작용 워크플로우에서의 제스처 탐색 및 피드백 향상의 필요성을 시사한다.
• 전반적으로 사용자 피드백은 매우 긍정적이었으며, 몸으로 느끼는 손으로 만질 수 있는 렌즈가 몰입형 분석 시스템의 사용성과 참여도를 크게 향상시킨다는 점을 시사한다.