[論文レビュー] Gaze as a Supplementary Modality for Interacting with Ambient Intelligence Environments

Daniel Gepner, Jérôme Simonin+1 more|arXiv (Cornell University)|Aug 26, 2007

Gaze Tracking and Assistive Technology参考文献 18被引用数 5

ひとこと要約

本論文は、インフォーマルスマート環境における音声ベースのインタラクションを補完する視線を提示し、インマーシブバーチャルリアリティおよび大規模ディスプレイ環境でのインタラクションを向上させることを目的としている。本研究では、2つの動作可能なインターフェースを提示している。1つは、運動機能に制限のあるユーザーが地図やグラフィカルソフトウェアに視線ベースでアクセスできるようにするものであり、もう1つは、視線連動ディスプレイの最適化を図るもので、実世界でのテストと段階的設計を通じて、使いやすさとアクセシビリティの向上を実証している。

ABSTRACT

We present our current research on the implementation of gaze as an efficient and usable pointing modality supplementary to speech, for interacting with augmented objects in our daily environment or large displays, especially immersive virtual reality environments, such as reality centres and caves. We are also addressing issues relating to the use of gaze as the main interaction input modality. We have designed and developed two operational user interfaces: one for providing motor-disabled users with easy gaze-based access to map applications and graphical software; the other for iteratively testing and improving the usability of gaze-contingent displays.

研究の動機と目的

• インフォーマルスマート環境において、音声と併用可能な視線を補助入力モダリティとして統合することの検討。
• 特に運動機能に制限のあるユーザーを対象とした、視線ベースのインタラクションにおける使いやすさとアクセシビリティの課題の解決。
• 現実世界の状況で視線インタラクションを支援する実用的なユーザーインターフェースの開発と評価。
• ユーザーのフィードバックとインターフェースの最適化を通じて、段階的に改善を図った視線連動ディスプレイシステムの開発。
• インマーシブ環境において、視線が補助的モダリティとしてだけでなく、主なインタラクションモダリティとしても実現可能であるか、その可能性と有効性の調査。

提案手法

• 運動機能に制限のあるユーザーが地図アプリケーションやグラフィカルソフトウェアに視線ベースでアクセスできるようにする視線ベースのインターフェースの設計および実装。
• 大規模ディスプレイおよびバーチャルリアリティ環境でのリアルタイムインタラクションを可能にする視線連動ディスプレイシステムの開発。
• 視線ベースのインタラクション技術の設計を改善するための段階的使いやすさテストの実施。
• インフォーマルスマート環境におけるマルチモーダルインタラクションを実現するため、視線追跡と音声入力を統合。
• 視線ベースのインタラクションにおけるアクセシビリティと効率性を確保するため、ユーザー中心設計の原則の適用。
• リアリティ・センターおよびCAVEに類似したインマーシブディスプレイを用いた制御環境下での視線インタラクションの評価。

実験結果

リサーチクエスチョン

• RQ1 視線は、インフォーマルスマート環境において、音声と併用する補助的モダリティとして効果的に活用できるか？
• RQ2 運動機能に制限のあるユーザーに対する視線ベースのインタラクションを実装するにあたり、どのような使いやすさの課題が生じるか？
• RQ3 インマーシブバーチャルリアリティ環境において、視線連動ディスプレイをリアルタイムかつ直感的なインタラクションに最適化するにはどうすればよいか？
• RQ4 アクセシブルで効率的な視線ベースのインターフェースを開発するにあたり、どのような設計原則が有効か？
• RQ5 複雑なインタラクティブ環境において、視線が実用的な主なインタラクションモダリティとして機能できる程度はどの程度か？

主な発見

• 視線ベースのインターフェースは、運動機能に制限のあるユーザーが物理的負担を最小限に抑えながら地図やグラフィカルソフトウェアを操作できることを実証した。
• 段階的テストの結果、ユーザーのフィードバックを反映して最適化された視線連動ディスプレイは、ユーザーのインタラクション速度と正確性を顕著に向上させた。
• 視線と音声入力の統合により、マルチモーダルインタラクションが向上し、入力エラーが減少し、システムの反応性が向上した。
• リアリティ・センターおよびCAVEのようなインマーシブ環境でも、システムは安定したパフォーマンスを示し、実世界への導入可能性を確認した。
• ユーザー研究の結果、特に運動制限のあるユーザーにおいて、視線ベースのインターフェースは高い使いやすさと満足度を示した。
• 本研究では、視線が補助的モダリティとしてだけでなく、制御された良好に設計されたシステムでは主なインタラクションモダリティとしても効果的に機能できることを確認した。