[論文レビュー] Tell Me How You Feel: Designing Emotion-Aware Voicebots to Ease Pandemic Anxiety In Aging Citizens

W. Mieleszczenko-Kowszewicz, K. Warpechowski+3 more|arXiv (Cornell University)|Jul 22, 2022

AI in Service Interactions被引用数 4

ひとこと要約

本論文では、感情認識、信頼性の高い情報提供、および受容とコミットメント療法（ACT）を統合したマルチモーダル音声ボットRitaを提案する。このシステムは、信頼と関与を築くために音声および視覚インターフェースを用い、主な発見として、信頼性の高い情報提供がユーザーの信頼と心理的介入への意欲を顕著に向上させることを示している。

ABSTRACT

The feeling of anxiety and loneliness among aging population has been recently amplified by the COVID-19 related lockdowns. Emotion-aware multimodal bot application combining voice and visual interface was developed to address the problem in the group of older citizens. The application is novel as it combines three main modules: information, emotion selection and psychological intervention, with the aim of improving human well-being. The preliminary study with target group confirmed that multimodality improves usability and that the information module is essential for participating in a psychological intervention. The solution is universal and can also be applied to areas not directly related to COVID-19 pandemic.

研究の動機と目的

• 新型コロナウイルス感染症の拡大に伴い増加する高齢者の不安と孤独感に対処すること。
• アクセス可能で直感的なインタラクションを可能にするマルチモーダル音声ボットを設計し、感情的な健康を支援すること。
• 1つのボットに情報提供と心理的療法を統合することで、ユーザーの信頼と関与が向上するかどうかを調査すること。
• 音声および視覚インターフェースが、人間らしさの認識と治療的信頼の向上に果たす役割を検討すること。
• レガシータブレットとアクセシブルな技術を活用した、スケーラブルで低コストなソリューションを高齢者向けに開発すること。

提案手法

• 情報提供、感情選択、ACTに基づく心理的介入の3つのコアモジュールを備えたマルチモーダル音声ボットRitaを開発した。
• アクセシビリティと自然なインタラクションを支援するため、音声およびタッチスクリーンインターフェースを統合した。
• 自然で親しみやすい言語を用い、感情表現に対して共感的に対応するように設計した。
• 心理的健康を促進するためのガイド付きエクササイズを備えた構造化されたACT療法モジュールを実装した。
• 孤立した高齢者を対象に定性的ユーザースタディを実施し、使いやすさ、信頼性、効果の認識を評価した。
• 半構造化インタビューを用いて、ユーザーの認識、信頼形成、ボットとの関与に関する洞察を収集した。

実験結果

リサーチクエスチョン

• RQ1 感情的健康を目的とした音声ボットにおいて、情報提供の統合がユーザーの信頼に与える影響は何か？
• RQ2 音声＋視覚のマルチモーダルインターフェースは、高齢者の使いやすさと人間らしさの認識をどの程度向上させるか？
• RQ3 高齢者は、パンデミックに起因するストレス下で、心理的介入を提供するボットをどのように認識し、関与するか？
• RQ4 情報の信頼性の認識が、ユーザーが治療的エクササイズに参加しようとする意欲に果たす役割は何か？
• RQ5 音声ボットは、孤立した高齢者にとって、従来の療法の有効な補完として機能できるか？

主な発見

• 情報モジュールがユーザーの信頼を築く上で不可欠であった。参加者は、信頼性の高い情報を受けた後、心理的介入に参加する意欲が高まっていると感じた。
• 音声インタラクションは、ボットの人間らしさの認識を顕著に向上させ、感情的な関与を促進し、ユーザーのいらだちを軽減した。
• ユーザーは、朝の点検などの日常習慣で使用した際、リラックスし、集中力が高まったと報告した。
• 孤独感を抱えるユーザーの多くが、人間との対話の代替手段としてボットの使用に関心を示した。
• ACT療法の理論的説明が不足していたため、効果の認識が低下した。これは、治療的目標をより明確に提示する必要があることを示唆している。
• 音声と視覚インターフェースの組み合わせにより、使いやすさが向上し、特にデジタル経験が限られた高齢者においても、継続的なインタラクションが可能になった。