[논문 리뷰] Personal+Context navigation: combining AR and shared displays in network path-following

Raphaël James, Anastasia Bezerianos외 4명|arXiv (Cornell University)|2020. 05. 19.

Interactive and Immersive Displays참고 문헌 77인용 수 4

한 줄 요약

이 논문은 증강현실(AR) 헤드셋과 공유 디스플레이를 결합하여 네트워크 시각화에서 비공개적이고 손이 자유로운 경로 추적을 가능하게 하는 Personal+Context 네비게이션을 제안한다. 공유 디스플레이의 네트워크 링크와 AR 커서 사이의 지속적 또는 일시적인 시각적 연결을 통해, 작업 정밀도에 따라 정확도와 사용자 선호도를 향상시키며, 협업 기반의 공공 네트워크 탐색에 대한 실현 가능성을 입증한다.

ABSTRACT

Shared displays are well suited to public viewing and collaboration, however they lack personal space to view private information and act without disturbing others. Combining them with Augmented Reality (AR) headsets allows interaction without altering the context on the shared display. We study a set of such interaction techniques in the context of network navigation, in particular path following, an important network analysis task. Applications abound, for example planning private trips on a network map shown on a public display.The proposed techniques allow for hands-free interaction, rendering visual aids inside the headset, in order to help the viewer maintain a connection between the AR cursor and the network that is only shown on the shared display. In two experiments on path following, we found that adding persistent connections between the AR cursor and the network on the shared display works well for high precision tasks, but more transient connections work best for lower precision tasks. More broadly, we show that combining personal AR interaction with shared displays is feasible for network navigation.

연구 동기 및 목표

• 네비게이션 중 개인의 AR 뷰와 공유 네트워크 시각화 간의 시각적 및 인지적 연결을 유지하는 데 도전 과제를 해결하기 위해.
• 공유 디스플레이가 네트워크 맥락을 보여주는 공공 환경에서, 사용자가 개인적인 안내가 필요한 비공개적이고 손이 자유로운 네비게이션을 지원하기 위해.
• AR와 공유 디스플레이 간의 다양한 결합 메커니즘이 경로 추적 작업 성능에 미치는 영향을 평가하기 위해.
• AR 헤드셋을 사용해 공유 시각적 맥락을 방해하지 않으면서도 개인화된 네비게이션 피드백을 제공할 수 있는지의 실현 가능성을 탐색하기 위해.

제안 방법

• 시스템은 HoloLens AR 헤드셋을 사용해 사용자의 시야에 특정 링크와 연결된 개인 시각적 단서(예: 슬라이딩 링 또는 마그네틱 포인터)를 렌더링한다.
• 시각적 연결은 AR 헤드 트래킹 기반으로 생성되어 AR 커서와 공유 네트워크의 노드/링크 간 실시간 정렬을 보장한다.
• 두 가지 상호작용 기법이 구현되었다: 지속적인 연결을 위한 'SlidingRing'과 눈동자 유도로 작동하는 일시적인 피드백을 위한 'Magnetic' 메타포.
• 손 움직임과 눈동자 방향에만 의존하여 제스처나 수동 기기 없이도 손이 자유로운 상호작용을 지원한다.
• 사용자는 머리를 움직여 AR 커서를 원하는 네트워크 경로에 정렬하고, 공유 디스플레이와의 연결을 강화하는 시각적 피드백을 받는다.
• 이 방법은 모든 사용자가 공유 네트워크 시각화를 그대로 유지하면서도, 개인화된 네비게이션 보조 기능을 AR 뷰에서 제공할 수 있도록 한다.

실험 결과

연구 질문

• RQ1 지속적인 AR와 공유 네트워크 디스플레이 간의 시각적 결합이 고정밀도 경로 추적 작업 성능에 어떤 영향을 미치는가?
• RQ2 저정밀도 경로 선택 작업에서 일시적인 시각적 결합은 지속적인 결합보다 어떻게 비교되는가?
• RQ3 AR 보조 네트워크 네비게이션에서 'SlidingRing'과 'Magnetic' 중 어떤 시각적 메타포가 더 나은 성능과 사용자 선호도를 제공하는가?
• RQ4 AR 헤드셋이 공유 디스플레이 맥락을 방해하지 않으면서 얼마나 잘 비공개적 네비게이션 지원을 제공할 수 있는가?

주요 결과

• SlidingRing 기법을 사용한 지속적 시각적 결합은 고정밀도 경로 추적 작업에서 성능을 크게 향상시켜 정밀도에 민감한 네비게이션에 효과적임을 시사한다.
• 저정밀도 경로 선택 작업에서는 일시적인 Magnetic 메타포가 표준 눈동자 커서보다 성능이 뛰어나고 사용자들이 선호함을 확인하여 단순한 네비게이션 목표에 더 나은 사용성임을 시사한다.
• AR와 공유 디스플레이의 조합은 공공 환경에서 비공개적이고 방해를 받지 않는 네비게이션을 가능하게 하며, 공유 맥락을 유지하면서도 개인화된 안내를 지원한다.
• 시각 피드백이 AR 헤드셋의 시야에 밀접하게 결합될 경우 사용자가 공유 네트워크에 더 나은 시각적 및 인지적 연결을 유지함을 확인했다.
• 시스템은 다수의 사용자가 공유 시각화를 변경하지 않고도 개인화된 AR 피드백을 받을 수 있는 다중 사용자 네트워크 네비게이션의 실현 가능성을 입증했다.
• 결과적으로 작업 정밀도가 최적의 결합 전략을 결정하며, 정밀도가 요구되는 경우 지속적, 단순한 목표의 경우 일시적인 전략이 바람직하다.