[论文解读] Fuzzy Model on Human Emotions Recognition

Kaveh Bakhtiyari, Hafizah Husain|arXiv (Cornell University)|Jan 1, 2013

Emotion and Mood Recognition参考文献 7被引用 19

一句话总结

本文提出了一种基于模糊逻辑的模型，用于通过键盘、鼠标和触摸屏交互实现多层级人类情绪识别，能够同时检测五种强度等级（0–4）的多种情绪。该系统采用支持向量机（SVM）进行训练，情绪等级估计的检测准确率最高提升5%，错误阳性率最高达16.7%，相较于离散情绪分类方法，能更自然、连续地表示人类情绪。

ABSTRACT

This paper discusses a fuzzy model for multi-level human emotions recognition by computer systems through keyboard keystrokes, mouse and touchscreen interactions. This model can also be used to detect the other possible emotions at the time of recognition. Accuracy measurements of human emotions by the fuzzy model are discussed through two methods; the first is accuracy analysis and the second is false positive rate analysis. This fuzzy model detects more emotions, but on the other hand, for some of emotions, a lower accuracy was obtained with the comparison with the non-fuzzy human emotions detection methods. This system was trained and tested by Support Vector Machine (SVM) to recognize the users' emotions. Overall, this model represents a closer similarity between human brain detection of emotions and computer systems.

研究动机与目标

• 为解决离散情绪检测的局限性，将情绪建模为连续的多层级状态，而非二元（存在/不存在）分类。
• 实现多种情绪及其各自强度等级的同步识别，以反映真实人类情绪状态的复杂性。
• 开发一种计算上可行、非侵入性的情绪识别系统，利用广泛可用的输入方式——键盘、鼠标和触摸屏，无需专用传感器。
• 通过模拟大脑基于模糊的 emotional processing，提升人机交互的自然性与准确性。

提出的方法

• 情绪在五级模糊尺度上进行分类（0 = 无，4 = 最高强度），实现情绪的连续表示。
• 采用体验抽样法（ESM）从130名具有不同文化背景的参与者中收集自报情绪状态。
• 通过在PANAS框架中增加7种基本情绪，构建了用于训练和评估的27种情绪数据集。
• 采用支持向量机（SVM）作为分类引擎，将行为特征（击键动态、鼠标移动、触摸交互）映射到模糊情绪等级。
• 应用模糊逻辑以建模情绪的可能共现性，从而估计给定强度等级下次要或共存情绪。
• 评估采用两项指标：(1) 情绪名称识别的正确率（准确率），(2) 情绪等级估计的正确性及低错误阳性率。

实验结果

研究问题

• RQ1 模糊模型能否有效将人类情绪表示为连续强度等级（0–4），而非离散类别？
• RQ2 系统在多大程度上能够以高准确率和低错误阳性率同时检测多种共现情绪？
• RQ3 文化与人口因素（如地区、性别）如何影响行为数据中情绪共现与强度的模式？
• RQ4 与传统的二元或单情绪检测模型相比，使用模糊情绪表示是否能提升情绪识别的真实感与准确性？

主要发现

• 与非模糊方法相比，该模糊模型通过识别多种情绪及其强度等级，检测准确率最高提升5%。
• 情绪等级估计的错误阳性率在0%至16.7%之间，表明在不同情绪状态下对强度的估计具有可靠性。
• 喜悦、期待、愤怒和恐惧等情绪表现出明显但重叠的变化模式，而厌恶与愤怒具有相似的动态特征。
• 该模型成功估计了共存情绪——例如，当喜悦为50%时，可估计恐惧为26%，接受度为55%，展示了多情绪感知能力。
• 男性参与者总体报告的情绪强度更强，其中‘活跃’为最强（3.24/4），‘不友好’为最弱（1.62/4）。
• 区域差异显著：中东参与者在喜悦达50%时报告了更高的恐惧（1.33）和惊讶（1.33），而欧洲参与者在同一条件下报告了更高的接受度（2.09）和期待（1.8）