[論文レビュー] A Survey Investigating Usage of Virtual Personal Assistants

Mateusz Dubiel, Martin Halvey+1 more|arXiv (Cornell University)|Jul 12, 2018

AI in Service Interactions参考文献 15被引用数 15

ひとこと要約

本調査（N=118）は、バーチャル・パーソナルアシスタント（VPA）の頻繁な利用者と頻度の低い利用者の間で、使用経験、パフォーマンス期待、プライバシー懸念にどのような差があるかを調査した。頻繁な利用者は、さまざまな状況においてより高い満足度とVPA利用の意欲を報告しているが、両グループともプライバシー懸念のレベルは同等であり、特に頻度の低い利用者にとっては音声認識（ASR）が主な障壁と感じられている。

ABSTRACT

Despite significant improvements in automatic speech recognition and spoken language understanding - human interaction with Virtual Personal Assistants (VPAs) through speech remains irregular and sporadic. According to recent studies, currently the usage of VPAs is constrained to basic tasks such as checking facts, playing music, and obtaining weather updates.In this paper, we present results of a survey (N = 118) that analyses usage of VPAs by frequent and infrequent users. We investigate how usage experience, performance expectations, and privacy concerns differ between these two groups. The results indicate that, compared with infrequent users, frequent users of VPAs are more satisfied with their assistants, more eager to use them in a variety of settings, yet equally concerned about their privacy.

研究の動機と目的

• 使用頻度がVPAのユーザーエクスペリエンス、パフォーマンス期待、プライバシー懸念に与える影響を理解すること。
• 音声認識および自然言語理解の技術的進歩にもかかわらず、定期的なVPAの採用が制限される要因を特定すること。
• 満足度、期待、プライバシーの観点から、頻繁な利用者と頻度の低い利用者を主な次元で比較すること。
• ユーザーフィードバック、使用頻度、およびVPAの認識される能力との間の相互作用を検討すること。

提案手法

• 参加者118名に対して、自己申告による使用頻度に基づいて頻繁な利用者と頻度の低い利用者に層別されたアンケート調査が実施された。
• 満足度、認識される能力、パフォーマンス期待、プライバシー懸念を評価するために、5段階リクルート尺度が用いられた。
• 頻繁な利用者と頻度の低い利用者の間での回答を比較するため、t検定およびボンフェローニ補正を用いた統計的分析が実施された。
• 使用状況（例：自宅、車中、公共の場所）や、遮断認識や個性といった特定のVPA機能に関する質問がアンケートに含まれた。
• 現在の能力（ASR、NLU）と将来の期待（例：人間らしい対話）の認識を比較するために、結果が分析された。
• 今後の研究として、日記研究のエノムエトロジカル分析を計画しており、日常的使用におけるASRの個人差を検討する。

実験結果

リサーチクエスチョン

• RQ1 RQ1: 機能性、使用状況、満足度の面で、頻繁な利用者と頻度の低い利用者にはどのような差があるか？
• RQ2 RQ2: 頻繁な利用者と頻度の低い利用者は、現在の対話能力の認識と将来のパフォーマンス期待において、異なる認識を持っているか？
• RQ3 RQ3: 頻繁な利用者と頻度の低い利用者の間で、プライバシー懸念に差があるか？

主な発見

• 頻繁な利用者は、頻度の低い利用者よりも、VPA全体に対する満足度が有意に高いと報告しており、満足度と使用頻度の間に強い相関があることが示唆された。
• 頻繁な利用者と頻度の低い利用者の両方が、同程度のレベルのプライバシー懸念を示しており、特に歩道上や公共交通機関など、公共の場での懸念が最も高かった。
• 頻繁な利用者は、自宅、1人でいるとき、家族と一緒にいるとき、パートナーと一緒にいるときなど、共有またはプライベートな状況でVPAを使用する可能性が有意に高いことが示された。
• 技術的進歩にもかかわらず、頻度の低い利用者にとっては、自動音声認識（ASR）が主な障壁と感じられており、41％の利用者が自分のアクセントを理解していると強く否定している。
• 頻繁な利用者と頻度の低い利用者の間で、現在の能力認識や将来のパフォーマンス期待に統計的に有意な差は認められなかったが、VPAの遮断認識については頻繁な利用者がより強い好みを示しており（M=4.45 対 4.09、p=0.54）、傾向は明確であった。
• 両グループとも、将来的にVPAがより人間らしくなり、より多くの質問を投げかけるようになると期待しているが、頻繁な利用者は特に社会的状況においてこのような機能を受け入れる傾向が強い。