[論文レビュー] Virtual Lenses as Embodied Tools for Immersive Analytics

Sven Kluge, Stefan Gladisch+3 more|arXiv (Cornell University)|Nov 22, 2019

Virtual Reality Applications and Impacts参考文献 25被引用数 4

ひとこと要約

本論文では、仮想現実（VR）における没入型3Dアナリティクスのための身体的インタラクションツールとして、操作可能な仮想レンズを導入し、手の動きを使って自然にレンズを作成・操作・組み合わせることで、複雑なソナー・データを探索できるようにしている。100名を超える参加者からのフィードバックは、このアプローチが直感的で没入感のあるデータ分析を可能にし、複数のレンズ効果を組み合わせることで埋もれた船の wreck を明らかにできたことを示している。

ABSTRACT

Interactive lenses are useful tools for supporting the analysis of data in different ways. Most existing lenses are designed for 2D visualization and are operated using standard mouse and keyboard interaction. On the other hand, research on virtual lenses for novel 3D immersive visualization environments is scarce. Our work aims to narrow this gap in the literature. We focus particularly on the interaction with lenses. Inspired by natural interaction with magnifying glasses in the real world, our lenses are designed as graspable tools that can be created and removed as needed, manipulated and parameterized depending on the task, and even combined to flexibly create new views on the data. We implemented our ideas in a system for the visual analysis of 3D sonar data. Informal user feedback from more than a hundred people suggests that the designed lens interaction is easy to use for the task of finding a hidden wreck in sonar data.

研究の動機と目的

• 3D没立体インタラクティブアナリティクス環境における、インタラクティブレンズの自然で身体的（エンジンバーディッド）なインタラクション技法の欠如に対処すること。
• VRにおいて実体感のある操作可能なツールとして機能する仮想レンズを設計し、直接的および遠隔的な操作を可能にすること。
• 空間的データ分析における焦点＋コンテキスト可視化を強化するため、柔軟なレンズの組み合わせとパrameter化を可能にすること。
• 多様な参加者を対象とした非公式なユーザーテストを通じて、レンズインタラクション設計の使いやすさと直感性を評価すること。
• 身体的体験とマルチモーダルフィードバック（視覚的、触覚的、音響的）が、VRアナリティクスにおける没入感とタスクパフォーマンスに果たす役割を調査すること。

提案手法

• 仮想レンズは、Oculus Riftを搭載したUnityベースのVRシステムを用いて、透過的で操作可能な3Dツールとして実装されている。
• ユーザーは手の動きによってレンズを作成し、インデックス・フィンガで直接操作する際は「つかむ」動作、レンズ作成および設定のためのラジアルメニューを活用する。
• ユーザーの物理的到達範囲外でもレンズを操作できるように、リモートレンズプロキシを導入し、インタラクションのなめらかさを維持している。
• レンズは動的パrameter化が可能で、空間的に組み合わせられ、重複領域では複数の視覚効果が同時に適用される。
• ユーザーの行動を強化し、没入感を高めるために、視覚的・触覚的・音響的のマルチモーダルフィードバックを統合している。
• リアルタイムでのボリュームレンダリングとレンズベースの代替可視化を実現するため、高解像度の3Dソナー・データ（512×256×256）を処理している。

実験結果

リサーチクエスチョン

• RQ1 3D没立体インタラクティブアナリティクス環境において、インタラクティブレンズをどのように自然で身体的（エンジンバーディッド）なインタラクションを可能にするように設計できるか？
• RQ2 操作可能な仮想レンズは、複雑な3Dデータを探索する際、ユーザーの直感性とタスクパフォーマンスをどの程度向上させるか？
• RQ3 複数のレンズを組み合わせることで、海底から0.5mの深さに埋もれた船の wreck といった隠れたデータ特徴をどの程度効果的に発見できるか？
• RQ4 マルチモーダルフィードバック（触覚的、音響的、視覚的）は、ユーザーの没入感とインタラクションの正確性をどの程度向上させるか？
• RQ5 VR経験の程度が異なるユーザーは、仮想レンズインタラクション技術をどの程度適応し、活用できるか？

主な発見

• 多様な背景を持つ100名を超えるユーザーが、VR経験がなくても仮想レンズの操作が直感的で学習しやすいと報告した。
• ユーザーは頻繁にレンズを重ね合わせて組み合わせることを試みており、この行動が自然な期待に合致しており、没入感を高めることを示している。
• 最大強度投影と一次微分の2つのレンズの組み合わせにより、海底から0.5mの深さに埋もれていた木造の船の wreck が初めて明らかになった。これは、本手法の分析的価値を裏付けるものである。
• VR経験のあるユーザーはインデックス・フィンガでの「つかむ」ジェスチャーに苦戦したため、アクセシビリティを向上させるために中指での「つかむ」モードを追加した。
• レンズ作成用のラジアルメニューは、誤動作が頻発しやすく、複雑なインタラクションワークフローにおけるジェスチャーの発見性とフィードバックの改善の必要性を浮き彫りにした。
• 全体として、ユーザーのフィードバックは強く肯定的であり、身体的で操作可能なレンズが、没立体アナリティクスシステムの使いやすさと没入感を顕著に向上させることを示している。