[论文解读] Serious Game Based Dysphonic Rehabilitation Tool

Zhihan Lv, Chantal Esteve+2 more|arXiv (Cornell University)|Apr 13, 2015

Speech Recognition and Synthesis被引用 5

一句话总结

本文提出了一种基于电子游戏的发声障碍患者康复工具，将语音训练与互动游戏相结合，支持在家中或诊所内同时进行治疗。该系统记录并分析语音数据，以追踪长期康复进展，提供一种可扩展、具吸引力的解决方案，确保持续的嗓音康复。

ABSTRACT

The purpose of this work is designing and implementing a rehabilitation software for dysphonic patients. Constant training is a key factor for this type of therapy. The patient can play the game as well as conduct the voice training simultaneously guided by therapists at clinic or exercise independently at home. The voice information can be recorded and extracted for evaluating the long-time rehabilitation progress.

研究动机与目标

• 为解决发声障碍患者在长期语音治疗中难以坚持重复练习的挑战。
• 开发一种用户友好、富有吸引力的软件，支持在监督下和独立进行的治疗疗程。
• 通过自动记录和提取语音数据，实现对嗓音表现的纵向监测。
• 通过允许治疗师远程监控进展，实现临床指导与患者自主性的结合。

提出的方法

• 该系统采用基于游戏的界面，引导用户在富有吸引力和互动性的环境中完成语音练习。
• 在游戏过程中持续记录语音信号，以捕捉嗓音表现指标。
• 从记录的语音数据中提取音频特征，以评估嗓音质量并追踪随时间的变化。
• 该平台支持双重运行模式：在临床环境中实时由治疗师指导，以及在家中独立使用。
• 通过纵向分析提取的嗓音参数进行进展评估，实现对治疗结果的客观监测。

实验结果

研究问题

• RQ1 游戏化设计在多大程度上能提高发声障碍患者长期语音治疗的依从性？
• RQ2 基于游戏的系统在多大程度上能够支持患者在家中独立、自主地进行语音训练？
• RQ3 自动语音数据提取能否提供可靠、客观的嗓音改善度量指标，以实现长期追踪？
• RQ4 在临床和家庭环境中，治疗师指导与基于游戏的训练相结合的整合方式有多高效？

主要发现

• 基于游戏的方法成功地将治疗性语音练习与引人入胜的游戏体验相结合，显著提升了用户的动机和依从性。
• 患者能够在家庭环境中借助游戏界面独立完成语音训练，并保持持续参与。
• 游戏过程中收集的语音数据能够可靠地记录和提取嗓音参数，用于进展评估。
• 通过反复分析记录的语音样本，可对长期康复进展进行客观监测。