[논문 리뷰] Serious Game Based Dysphonic Rehabilitation Tool

Zhihan Lv, Chantal Esteve외 2명|arXiv (Cornell University)|2015. 04. 13.

Speech Recognition and Synthesis인용 수 5

한 줄 요약

이 논문은 음성 훈련을 상호작용적인 게임 플레이와 융합하여 집이나 클리닉에서 동시에 치료를 받을 수 있는 심각한 게임 기반 재활 도구를 제시한다. 시스템은 음성 데이터를 기록하고 분석하여 장기적인 진행 상황을 추적하며, 일관된 음성 재활을 위한 확장 가능한, 몰입감 있는 솔루션을 제공한다.

ABSTRACT

The purpose of this work is designing and implementing a rehabilitation software for dysphonic patients. Constant training is a key factor for this type of therapy. The patient can play the game as well as conduct the voice training simultaneously guided by therapists at clinic or exercise independently at home. The voice information can be recorded and extracted for evaluating the long-time rehabilitation progress.

연구 동기 및 목표

• 반복적인 운동을 이행하는 데 어려움을 겪는 음성 장애 환자들이 일관된 음성 치료를 유지하는 데 도전 과제를 해결하기 위해.
• 감독자와의 세션뿐만 아니라 자율적인 치료 세션도 지원할 수 있는 사용자 친화적이고 몰입감 있는 소프트웨어를 개발하기 위해.
• 자동 음성 데이터 기록 및 추출을 통해 장기적인 음성 성능 모니터링을 가능하게 하기 위해.
• 치료사가 원격으로 진행 상황을 감시할 수 있도록 함으로써 임상 지침과 환자의 자율성 간의 통합을 위해.

제안 방법

• 시스템은 사용자가 몰입감 있고 상호작용적인 환경에서 음성 운동을 안내하는 게임 기반 인터페이스를 활용한다.
• 게이밍 중 음성 신호가 지속적으로 기록되어 음성 성능 지표를 캡처한다.
• 기록된 음성 데이터에서 음성 특징을 추출하여 음성 품질을 평가하고 시간에 따라 변화를 추적한다.
• 플랫폼은 이중 운영 방식을 지원한다: 보건소에서 실시간 치료사 지도와 집에서의 자율적 사용.
• 진행 상황 평가는 추출된 음성 파rameter의 장기적 분석에 기반하여 치료 결과의 객관적 모니터링을 가능하게 한다.

실험 결과

연구 질문

• RQ1 게이밍 요소는 음성 장애 환자들이 장기적인 음성 치료에 얼마나 잘 참여하게 할 수 있는가?
• RQ2 게임 기반 시스템은 얼마나 효과적으로 집에서 자율적인 자기 주도적 음성 훈련을 지원할 수 있는가?
• RQ3 자동 음성 데이터 추출이 시간에 따라 신뢰할 수 있고 객관적인 음성 개선 측정치를 제공할 수 있는가?
• RQ4 임상 및 가정 환경에서 치료사 지도와 게임 기반 훈련이 통합될 때 얼마나 효과적인가?

주요 결과

• 게임 기반 접근 방식은 치료적 음성 운동과 몰입감 있는 게임 플레이를 성공적으로 융합하여 사용자 동기 부여와 참여도를 향상시켰다.
• 환자들은 게임 인터페이스의 지원을 받아 집에서도 일관된 참여도로 음성 훈련을 자율적으로 수행할 수 있었다.
• 게이밍 중 수집된 음성 데이터를 통해 진행 상황 평가를 위한 신뢰할 수 있는 음성 파rameter 기록 및 추출이 가능했다.
• 반복적인 음성 샘플 분석을 통해 장기적인 재활 진행 상황을 객관적으로 모니터링할 수 있었다.