[论文解读] Review of the Use of Electroencephalography as an Evaluation Method for Human-Computer Interaction

Jérémy Frey, Christian Mühl+2 more|elib (German Aerospace Center)|Nov 9, 2013

Human-Automation Interaction and Safety参考文献 53被引用 15

一句话总结

本文综述了脑电图（EEG）作为评估人机交互（HCI）的神经影像学方法，展示了其能够客观、实时测量工作量、注意力、情绪和错误识别等关键认知与情绪构念的能力。研究主张将EEG整合到HCI评估中，以提升可用性和用户体验，特别是在受控测试阶段实现对心理状态的实时、客观评估。

ABSTRACT

Evaluating human-computer interaction is essential as a broadening population uses machines, sometimes in sensitive contexts. However, traditional evaluation methods may fail to combine real-time measures, an "objective" approach and data contextualization. In this review we look at how adding neuroimaging techniques can respond to such needs. We focus on electroencephalography (EEG), as it could be handled effectively during a dedicated evaluation phase. We identify workload, attention, vigilance, fatigue, error recognition, emotions, engagement, flow and immersion as being recognizable by EEG. We find that workload, attention and emotions assessments would benefit the most from EEG. Moreover, we advocate to study further error recognition through neuroimaging to enhance usability and increase user experience.

研究动机与目标

• 评估使用脑电图（EEG）作为客观、实时方法评估人机交互（HCI）质量的可行性与优势。
• 识别哪些认知与情绪构念——如工作量、注意力、情绪和错误识别——可通过EEG测量，并最适于通过神经影像学增强。
• 解决传统HCI评估方法的局限性，包括主观性、缺乏实时数据以及对用户行为的干扰。
• 提出一个将EEG与传统评估技术相结合的框架，以克服方法论缺陷，同时利用神经影像学对心理状态的敏感性。
• 强调EEG在推进用户体验方面的潜力，通过神经生理信号实现可用性问题的早期检测。

提出的方法

• 本文对EEG在HCI评估中的应用进行了系统性综述，重点关注与用户体验和系统可用性相关的构念。
• 将评估方法分为四类：行为研究、调查（如问卷、口头报告）、生理传感器和神经影像学，其中EEG为研究重点。
• 选择EEG是因其在时间分辨率、成本和实验室评估实用性之间达到最佳平衡，尽管存在信号质量与电极放置方面的挑战。
• 分析与特定构念相关的EEG信号模式，如事件相关电位（ERPs）用于注意力与工作量，以及唤醒度/效价模型用于情绪。
• 评估消费级EEG设备对可靠性与有效性的潜在影响，指出电极数量、信号质量与软件抽象化之间的权衡。
• 提出一个概念性框架，将EEG与传统方法整合，以最小化偏差并增强构念效度。

实验结果

研究问题

• RQ1 在HCI中，哪些认知与情绪构念最适于通过EEG实现客观测量？
• RQ2 与传统评估方法相比，EEG在实时性、客观性以及情境数据整合方面表现如何？
• RQ3 EEG在多大程度上可提升可用性评估，特别是在检测错误识别与心理工作量方面？
• RQ4 当前EEG硬件与软件在HCI评估中的主要局限是什么，尤其是消费级设备？
• RQ5 如何有效结合EEG与传统评估方法，以构建更全面、可靠的HCI评估框架？

主要发现

• EEG为测量工作量、注意力和情绪提供了可靠且实时的方法，这三类构念在HCI评估中最为受益于神经影像学技术。
• 事件相关电位（ERPs）可实现对注意力处理的早期检测，从而预测用户在交互过程中能识别多少细节。
• 错误识别传统方法难以评估，但通过EEG测量具有巨大潜力，为改进可用性测试提供了新途径。
• 消费级EEG设备虽更具可及性，但常以牺牲信号质量与标准化为代价，尤其是电极数量较少且缺乏校准，可能影响可靠性。
• 将EEG与传统评估技术（如问卷和行为观察）结合，可弥补各类方法的个体缺陷，提升整体效度。
• 尽管存在运动伪影与信号处理复杂性等挑战，EEG仍是受控HCI评估中最实用的神经影像学方法，因其在成本、时间分辨率与可用性之间达到最佳平衡。