[论文解读] A Virtual Conversational Agent for Teens with Autism: Experimental Results and Design Lessons

Mohammad Rafayet Ali, Zahra Rasazi+6 more|arXiv (Cornell University)|Nov 7, 2018

Autism Spectrum Disorder Research参考文献 50被引用 8

一句话总结

本文提出了一种基于网络的虚拟对话代理，旨在帮助高功能自闭症谱系障碍（ASD）青少年随时随地私下练习社交技能。该系统采用隐马尔可夫模型和基于模板的对话管理，提供非语言线索的实时反馈及总结性评估。用户研究揭示了在透明度、参与度和个性化方面的重要设计洞见。

ABSTRACT

We present the design of an online social skills development interface for teenagers with autism spectrum disorder (ASD). The interface is intended to enable private conversation practice anywhere, anytime using a web-browser. Users converse informally with a virtual agent, receiving feedback on nonverbal cues in real-time, and summary feedback. The prototype was developed in consultation with an expert UX designer, two psychologists, and a pediatrician. Using the data from 47 individuals, feedback and dialogue generation were automated using a hidden Markov model and a schema-driven dialogue manager capable of handling multi-topic conversations. We conducted a study with nine high-functioning ASD teenagers. Through a thematic analysis of post-experiment interviews, identified several key design considerations, notably: 1) Users should be fully briefed at the outset about the purpose and limitations of the system, to avoid unrealistic expectations. 2) An interface should incorporate positive acknowledgment of behavior change. 3) Realistic appearance of a virtual agent and responsiveness are important in engaging users. 4) Conversation personalization, for instance in prompting laconic users for more input and reciprocal questions, would help the teenagers engage for longer terms and increase the system's utility.

研究动机与目标

• 开发一种可访问的、基于网络的平台，使自闭症青少年（ASD）能在临床环境之外练习社交互动。
• 解决自闭症青少年在获取个性化、一致性的社交技能训练方面资源有限的挑战。
• 设计一种虚拟代理，提供对非语言交流的实时反馈，并保持用户参与度。
• 通过高功能ASD青少年的反馈，识别可用性和设计原则。
• 通过定性与实验方法评估系统对用户参与度、感知有用性及行为改变的影响。

提出的方法

• 系统采用基于模板的对话管理器，以处理多主题对话并维持对话连贯性。
• 使用隐马尔可夫模型（HMM）自动分析互动中的非语言线索，并提供反馈。
• 界面基于网页浏览器构建，支持私密、按需练习，无需特殊硬件。
• 虚拟代理的设计结合了用户体验专家、心理学家和儿科医生的建议，以确保临床和可用性相关性。
• 用户互动记录通过实验后访谈的专题分析进行提取，以获得设计洞见。
• 反馈机制包括对非语言线索的实时评估和会话后的总结报告，以强化学习效果。

实验结果

研究问题

• RQ1 高功能自闭症青少年如何评价该虚拟对话代理在社交技能训练中的实用性与真实感？
• RQ2 哪些设计特征能增强该群体在虚拟代理系统中的参与度与持续互动？
• RQ3 在模拟环境中，对非语言线索的实时反馈在支持社交技能发展方面的有效性如何？
• RQ4 在日常使用中，采用此类系统的主要可用性和心理障碍是什么？
• RQ5 用户对代理在互动中提供个性化提示及对行为改变的识别有何反应？

主要发现

• 用户强调，必须全面告知系统的目的和局限性，以避免产生不切实际的期望。
• 对行为改变的积极认可（如识别出改善的眼部接触或轮流发言）显著提升了用户动机和对进步的感知。
• 虚拟代理的逼真外貌和响应性行为对维持用户参与度和信任感至关重要。
• 个性化功能（如提示表达较少的用户提供更多输入，或提出互惠性问题）显著延长了互动时长，并提升了感知实用性。
• 专题分析显示，用户更青睐感觉真实且具备适应性的系统，而非刻板或过度脚本化的系统。
• 尽管样本量较小（n=9），定性反馈一致强调透明度、响应性和个性化是核心设计支柱。