[论文解读] Virtual Lenses as Embodied Tools for Immersive Analytics

Sven Kluge, Stefan Gladisch+3 more|arXiv (Cornell University)|Nov 22, 2019

Virtual Reality Applications and Impacts参考文献 25被引用 4

一句话总结

本文提出了一种虚拟的、可抓握的透镜作为沉浸式虚拟现实3D分析中的具身交互工具，使用户能够通过手势自然地创建、操作和组合透镜，以探索复杂的声呐数据。超过100名用户的反馈表明，该方法支持直观、沉浸式的数据分析，通过组合透镜效果成功揭示了一艘沉没的船骸。

ABSTRACT

Interactive lenses are useful tools for supporting the analysis of data in different ways. Most existing lenses are designed for 2D visualization and are operated using standard mouse and keyboard interaction. On the other hand, research on virtual lenses for novel 3D immersive visualization environments is scarce. Our work aims to narrow this gap in the literature. We focus particularly on the interaction with lenses. Inspired by natural interaction with magnifying glasses in the real world, our lenses are designed as graspable tools that can be created and removed as needed, manipulated and parameterized depending on the task, and even combined to flexibly create new views on the data. We implemented our ideas in a system for the visual analysis of 3D sonar data. Informal user feedback from more than a hundred people suggests that the designed lens interaction is easy to use for the task of finding a hidden wreck in sonar data.

研究动机与目标

• 解决在3D沉浸式分析环境中交互式透镜缺乏自然、具身交互技术的问题。
• 设计在VR中可作为实体、可抓握工具的虚拟透镜，支持直接与远程操作。
• 实现灵活的透镜组合与参数化，以增强空间数据分析中的聚焦+上下文可视化。
• 通过多样化参与者的非正式用户测试，评估透镜交互设计的可用性与直观性。
• 探索具身性与多模态反馈（视觉、触觉、听觉）如何提升VR分析中的用户沉浸感与任务表现。

提出的方法

• 在基于Unity的VR系统中，使用Oculus Rift实现虚拟透镜，作为透明的、可抓握的3D工具。
• 用户通过手势创建透镜，使用食指抓取实现直接操作，通过径向菜单实现透镜创建与设置。
• 远程透镜代理允许用户在物理范围外控制透镜，保持交互的流畅性。
• 透镜支持动态参数化，可进行空间组合，重叠区域同时应用多种视觉效果。
• 集成多模态反馈（视觉、触觉、听觉），以强化用户操作并增强沉浸感。
• 系统对高分辨率3D声呐数据（512×256×256）进行实时体绘制与基于透镜的替代可视化处理。

实验结果

研究问题

• RQ1 如何设计交互式透镜，以支持在3D沉浸式分析环境中实现自然、具身的交互？
• RQ2 可抓握的虚拟透镜在多大程度上提升了用户对复杂3D数据探索的直观理解与任务表现？
• RQ3 多种透镜的组合如何增强对隐藏数据特征（如声呐数据中埋藏0.5米深的船骸）的发现能力？
• RQ4 多模态反馈（触觉、听觉、视觉）在维持用户沉浸感与交互准确性方面起到何种作用？
• RQ5 不同VR使用经验水平的用户如何适应并使用虚拟透镜交互技术？

主要发现

• 超过100名具有不同背景的用户表示，虚拟透镜交互直观且易于学习，即使没有先前的VR使用经验。
• 用户频繁尝试通过重叠透镜来组合它们，表明该行为符合自然预期，并增强了沉浸感。
• 两种透镜的组合——最大强度投影与一阶导数——揭示了此前隐藏的、埋藏于海床下0.5米深的木质船骸，证明了该方法的分析价值。
• 具有VR使用经验的用户在使用食指抓取手势时遇到困难，促使增加了中指抓取模式以提升可访问性。
• 透镜创建的径向菜单容易被意外激活，凸显了在复杂交互工作流中改进手势发现与反馈的必要性。
• 总体而言，用户反馈极为积极，表明具身化、可抓握的透镜显著提升了沉浸式分析系统的可用性与用户参与度。