[論文レビュー] Investigation of Multiple Resource Theory Design Principles on Robot Teleoperation and Workload Management

Han Zhao, Adam Norton+6 more|arXiv (Cornell University)|Mar 30, 2021

Human-Automation Interaction and Safety参考文献 28被引用数 7

ひとこと要約

本研究では、マルチプルリソース理論（MRT）を応用し、タスク情報を視覚的および聴覚的チャネルに分散させることで、ロボット遠隔操作における認知的負荷を軽減し、パフォーマンスを向上させられるかを検討した。全体的な差異は有意ではなかったが、モダリティの組み合わせに対する個人差が認められ、特に第一陣のシナリオにおける長時間作業では、一様なMRTに基づく設計よりも、個別化・適応型インターフェースの有効性が示唆された。

ABSTRACT

Robot interfaces often only use the visual channel. Inspired by Wickens' Multiple Resource Theory, we investigated if the addition of audio elements would reduce cognitive workload and improve performance. Specifically, we designed a search and threat-defusal task (primary) with a memory test task (secondary). Eleven participants - predominantly first responders - were recruited to control a robot to clear all threats in a combination of four conditions of primary and secondary tasks in visual and auditory channels. We did not find any statistically significant differences in performance or workload across subjects, making it questionable that Multiple Resource Theory could shorten longer-term task completion time and reduce workload. Our results suggest that considering individual differences for splitting interface modalities across multiple channels requires further investigation.

研究の動機と目的

• 視覚的および聴覚的チャネルにタスク情報を分散させることで、ロボット遠隔操作における認知的負荷を軽減できるかを検証すること。
• 視覚的・聴覚的のクロスモダリティインターフェース（音声・視覚）が、視覚的・聴覚的のイントラモダリティインターフェース（視覚・視覚または音声・音声）よりもパフォーマンスを向上させるかを評価すること。
• モダリティの好みやタスクパフォーマンスに及ぼす個人差の役割を調査すること。
• 都市探査救助のような高リスク環境における長期的人間-ロボットインタラクションにおいて、マルチプルリソース理論（MRT）が信頼できる設計原則として機能できるかを明らかにすること。

提案手法

• 11名の第一陣参加者を対象に、シミュレートされた脅威解除タスクを実行するロボット遠隔操作を実施した被験内実験。
• 二重タスクパラダイムを採用：主タスク（視覚的および／または聴覚的）と補助作業記憶タスク（視覚的および／または聴覚的）を同時に実行。
• 4つの条件でインターフェースモダリティを変化：VV（視覚・視覚）、VA（視覚・聴覚）、AV（聴覚・視覚）、AA（音声・音声）。
• PioneerロボットにKinectおよびレーザーセンサを搭載し、ROSを介して制御。4つの隠れた脅威を含む92m²のテストコースを用いた。
• タスク完了時間、補助タスクの正確性、およびNAS-TLXを用いた負荷測定によりパフォーマンスを測定。
• 負荷およびコマンド到着時間データに正規性の違反が認められたため、非パラメトリック検定（クラスカル・ウォリスH検定およびウィルコクソン符号順位検定）を適用。

実験結果

リサーチクエスチョン

• RQ1 音声および視覚の複数の感覚チャネルを用いることで、単一チャネルインターフェースと比較して、ロボット遠隔操作における認知的負荷が軽減されるか？
• RQ2 クロスモダリティタスク提示（例：視覚的主タスクに聴覚的補助タスク）は、イントラモダリティ提示（視覚的主タスクに視覚的補助タスク）よりもタスクパフォーマンスを向上させるか？
• RQ3 認知能力やモダリティ好みの個人差が、マルチモーダルインターフェースにおけるパフォーマンスおよび負荷にどの程度影響を及ぼすか？
• RQ4 マルチプルリソース理論（MRT）は、現実世界のシナリオにおける長時間で複雑な遠隔操作タスクに信頼性を持って応用可能か？

主な発見

• 4つのインターフェース条件（VV、VA、AV、AA）間で、全体的な負荷やパフォーマンスに有意差は認められず、本研究の文脈ではMRTが効果を発揮しなかったことを示唆した。
• 参加者ごとにモダリティの順序や提示方法によるパフォーマンスの変動が顕著に認められ、p6、p3、p7は補助タスクの反応時間に有意差を示した。
• p6は、第1走（5.46秒）から第2走（10.28秒）にかけて、正しいコマンド入力までの時間が著しく延長しており、疲労やモダリティ干渉の兆候が示唆された。
• p5はVV条件下で補助タスクに応答できず、両方のタスクが視覚モダリティを使用した場合に視覚チャネルの過負荷が生じた可能性が示唆された。
• 一部の参加者（例：p3、p6、p10）は、補助タスクを聴覚的に提示された場合にパフォーマンスが向上したが、p11は視覚的提示を好んだことから、強い個人差が確認された。
• 本研究の結論として、MRTは長期的遠隔操作において普遍的に有効な設計原則とは言えず、代わりに個別化・適応型インターフェースの有効性が示された。