[論文レビュー] Robotic Haptic Proxies for Collaborative Virtual Reality

Zhenyi He, Fengyuan Zhu+2 more|arXiv (Cornell University)|Jan 31, 2017

Interactive and Immersive Displays参考文献 17被引用数 7

ひとこと要約

本論文では、軽量で移動可能なロボット型のタッチフィードバックプロキシを用いて、物理的で実体のあるタッチフィードバックを伴う遠隔および共有型バーチャルリアリティ（VR）協働を可能にするシステムを提案する。仮想オブジェクトを、見えない物理的プロキシとして機能する軽量で移動可能なロボットにマッピングすることで、1対多、多対1、1対1のマッピングをサポートし、低遅延かつ高いユーザ受容性を実現する。このシステムは、ローカルおよびリモート環境の両方で、没入的で低コストな協働VR体験を可能にする。

ABSTRACT

We propose a new approach for interaction in Virtual Reality (VR) using mobile robots as proxies for haptic feedback. This approach allows VR users to have the experience of sharing and manipulating tangible physical objects with remote collaborators. Because participants do not directly observe the robotic proxies, the mapping between them and the virtual objects is not required to be direct. In this paper, we describe our implementation, various scenarios for interaction, and a preliminary user study.

研究の動機と目的

• 遠隔ユーザーがロボットプロキシを通じて物理的オブジェクトを共有・操作できる協働型バーチャルリアリティ体験を可能にすること。
• 従来のタッチデバイスの制限を克服し、動的かつ再構成可能な仮想オブジェクトのプロキシとして、移動可能で軽量なロボットを用いること。
• 仮想オブジェクトと物理的ロボットの間の柔軟なマッピング（例：1対多、多対1）を検討し、スケーラビリティとインタラクションの柔軟性を向上させること。
• 共有空間およびリモート空間の両方のVR協働シナリオにおいて、ユーザが実感するリアリズム、操作の自然さ、システムの実現可能性を評価すること。
• ロボットプロキシが、没入感と使いやすさを高める低遅延のタッチフィードバックを提供できることを実証すること。

提案手法

• システムは、Holojam SDKとOptiTrackモーショントラッキングを用い、ユーザーおよび物理的オブジェクトの絶対的位置と姿勢をリアルタイムで特定する。
• 移動可能なロボットプロキシは、外側からのアプローチ（outside-in）により制御され、仮想オブジェクトと物理的ロボットの間で正確かつリアルタイムの同期が可能になる。
• 3種類のマッピング戦略（1対1、多対1、1対多）を実装し、仮想オブジェクトを物理的ロボットで柔軟に表現可能にする。
• ジェスチャー認識と予測技術を用いて、「テレキネシス」に似た制御を実現し、直接的な接触なしにユーザーがロボットプロキシを操作して仮想オブジェクトを移動できるようにする。
• 共有空間（同じ部屋内）およびリモート空間（分散した場所）の両方の協働を想定したプロトタイプを開発し、マルチユーザVR体験をサポートする。
• 遠隔ユーザー間で同期されたタッチフィードバックを提供し、同じ仮想オブジェクトに対して共有された物理的タッチ体験を可能にする。

実験結果

リサーチクエスチョン

• RQ1 ロボット型タッチフィードバックプロキシは、物理的場所が離れた状態でも、どのように没入的で協働的なVR体験を可能にするか？
• RQ2 ユーザの使いやすさとユーザの認識を考慮した場合、仮想オブジェクトと物理的ロボットプロキシの間で最も効果的なマッピングは何か？
• RQ3 ジェスチャー制御と直接的な物理的インタラクションの間で、速度、正確性、およびユーザの好みの観点から、どちらが優れているか？
• RQ4 このシステムは、VR内での物理的存在感とオブジェクト操作の実感をどの程度強く与えるのか？
• RQ5 認識された遅延は、遠隔協働VRにおけるユーザ体験とリアリズムの認識にどの程度影響を与えるか？

主な発見

• ジェスチャー制御条件下でのオブジェクト操作の89.6％が、物理的キャッチングではなくジェスチャーによって実行された。特に遠方のターゲットでは顕著であった。
• 遠方のターゲットでは、より高い安定性と最適化の可能性があるとして、参加者の81.3％が中距離ターゲット、68.8％が近距離ターゲットに対してジェスチャーを好んだ。
• ジェスチャーによるオブジェクト移動の平均時間は1.97秒であり、物理的キャッチング（1.5秒）よりわずかに長かったが、距離にわたる一貫性は高かった。
• 87.5％のユーザーが、オブジェクトが空間を移動する感覚を「説得力がある」と評価（5段階中4以上）、81％のユーザーがジェスチャー制御の自然さを「十分に自然」と感じた（5段階中3以上）。
• 実験中に孤立感を感じたユーザーはわずか12.5％であり、全参加者が相手の動きが自然に感じられたと報告しており、リモート協働における高いリアリズムの認識が示された。
• 平均的な認識遅延は5段階中2.31であり、75％以上のユーザーが許容可能と感じており、システムが許容できるほど低い遅延を維持していることが示された。