[論文レビュー] Conversations for Vision: Remote Sighted Assistants Helping People with Visual Impairments

Sooyeon Lee, Madison Reddie+5 more|arXiv (Cornell University)|Dec 1, 2018

Tactile and Sensory Interactions参考文献 7被引用数 3

ひとこと要約

本研究は、視覚障害者（PVI）と訓練された人間のエージェントを結ぶ動画ベースのサービスであるAiraを用いた遠隔視覚支援について調査する。4つの主要な支援タイプ（状況説明、ナビゲーション、パフォーマンス支援、社会的相互作用）を特定し、効果的な協働が文脈に応じた会話スタイル、相互の信頼、およびジェスチャーなどの非言語的側面や、情報伝達の向上を目的としたテキスト／ハプティクスフィードバックの統合に依存することを示している。

ABSTRACT

People with visual impairment (PVI) must interact with a world they cannot see. Remote sighted assistance has emerged as a conversational/social support system. We interviewed participants who either provide or receive assistance via a conversational/social prosthetic called Aira (https://aira.io/). We identified four types of support provided: scene description, performance, social interaction, and navigation. We found that conversational style is context-dependent. Sighted assistants make intentional efforts to elicit PVI's personal knowledge and leverage it in the guidance they provide. PVI used non-verbal behaviors (e.g. hand gestures) as a parallel communication channel to provide feedback or guidance to sighted assistants. We also discuss implications for design.

研究の動機と目的

• 遠隔のヒューマンエージェントが視覚障害者（PVI）を効果的に支援するためのコミュニケーションおよび相互作用のダイナミクスを理解すること。
• 情報提示の方法が、異なる文脈やタスクに応じてどのように変化すべきかを検討すること。
• PVIおよび視覚支援者に特化した会話型ユーザインターフェースおよび協働技術の設計に向けた示唆を同定すること。

提案手法

• PVIユーザーおよびAiraエージェントの両方との深掘りインタビューを実施し、実世界での利用状況に関する洞察を収集した。
• 対話パターン、フィードバックメカニズム、および対話中に用いられる非言語的行動（例：手の動き）を分析した。
• 物体の説明、ナビゲーション、パフォーマンス支援、社会的相互作用の4分野における支援ニーズの文脈的差異を検討した。
• 相互の信頼、柔軟性、および個人の知識や好みの活用によるコミュニケーションのカスタマイズといった、重要な設計原則を同定した。
• テキストベースのメッセージ送信および片方向のハプティクスフィードバックを併用する通信チャネルとしての強化を提案した。
• 相互理解の形成における共通の知識（対人的知識、ドメイン知識、支援知識）の役割を評価し、協働を支援するものとした。

実験結果

リサーチクエスチョン

• RQ1 遠隔のヒューマンエージェントがPVIを効果的に支援するためには、どのようなコミュニケーションおよび相互作用が求められるか？
• RQ2 情報提示の方法は、文脈、タスク、またはユーザーの目的に応じてどのように異なるべきか？
• RQ3 これらの発見が、会話型ユーザインターフェースおよびPVIと視覚支援者のための協働技術の設計にどのような示唆をもたらすか？

主な発見

• PVIは、主に4つの文脈（状況説明、ナビゲーション、パフォーマンス支援、社会的相互作用）のために遠隔視覚支援を利用している。
• 視覚支援者（エージェント）は、文脈に応じて会話スタイルを調整し、PVIの個人的な知識を意図的に活用して誘導を改善している。
• PVIは、対話中にフィードバックや誘導を提供するために、手の動きなどの非言語的側面を並列の通信チャネルとして用いている。
• PVIおよびエージェントの両方が、成功した遠隔協働のためには相互の信頼、尊重、柔軟性が不可欠であると強調している。
• 情報伝達の速度向上と認知的負荷の低減を目的として、テキストメッセージや片方向のハプティクスフィードバックなどの追加の非言語的通信チャネルへの強い需要がある。
• エージェントは、社会的サインの説明を通じてPVIの社会的認識を支援するため、遠隔支援が実用的タスクを超えて社会的統合を支援することも可能である。