[논문 리뷰] A Survey on Mobile Affective Computing

Shengkai Zhang, Pan Hui|arXiv (Cornell University)|2014. 10. 07.

Emotion and Mood Recognition참고 문헌 86인용 수 5

한 줄 요약

이 종합 검토는 애플 워치, 구글 글래스, 피트비트와 같은 스마트 웨어러블 기기들을 활용한 모바일 정서 컴퓨팅의 최근 발전을 다루며, 전통적인 실험 환경에서 정서를 고립된 상태로 연구하는 데서 비롯되는 '투과 불가능한 정서'의 한계를 극복하고 실제 생활 환경에서 자연스럽고 상호작용 기반의 정서 감지가 가능하게 한다. 이 논문은 모바일 정서 컴퓨팅을 위한 모델, 방법론 및 시스템을 종합적으로 정리하고 핵심 과제와 향후 방향성을 제시한다.

ABSTRACT

This survey presents recent progress on Affective Computing (AC) using mobile devices. AC has been one of the most active research topics for decades. The primary limitation of traditional AC research refers to as impermeable emotions. This criticism is prominent when emotions are investigated outside social contexts. It is problematic because some emotions are directed at other people and arise from interactions with them. The development of smart mobile wearable devices (e.g., Apple Watch, Google Glass, iPhone, Fitbit) enables the wild and natural study for AC in the aspect of computer science. This survey emphasizes the AC study and system using smart wearable devices. Various models, methodologies and systems are discussed in order to examine the state of the art. Finally, we discuss remaining challenges and future works.

연구 동기 및 목표

• 기존 정서 컴퓨팅에서 정서를 사회적 상호작용이 아닌 고립된 상태로 연구하는 데서 비롯되는 '투과 불가능한 정서'의 한계를 해결하기 위해.
• 스마트 웨어러블 기기가 실제 사회적 환경에서 자연스럽고 실생활 기반의 정서 연구를 어떻게 가능하게 하는지 분석하기 위해.
• 모바일 및 웨어러블 플랫폼을 위한 정서 컴퓨팅의 최신 모델, 방법론 및 시스템을 종합적으로 조사하기 위해.
• 모바일 정서 컴퓨팅 분야에서의 열린 과제를 규명하고 향후 연구 방향을 제안하기 위해.

제안 방법

• 모바일 및 웨어러블 기기들을 활용한 정서 컴퓨팅 관련 최근 문헌에 대한 체계적 검토.
• 웨어러블 환경에서의 감지 모odalities(예: 생리적, 행동적, 환경적) 기반으로 정서 컴퓨팅 시스템을 분류하기.
• 다중모달 융합 및 맥락 인지 처리를 포함한 정서 인식 방법론 분석.
• 일상생활에서 실시간, 지속적이고 비차별적인 정서 감지를 고려한 시스템 설계 평가.
• 고립된 정서 상태를 넘어서 사회적 상호작용적 요소를 반영한 모델 통합

실험 결과

연구 질문

• RQ1 모바일 및 웨어러블 기기는 기존의 실험실 기반 접근 방식에 비해 정서 연구를 어떻게 더 자연스럽고 생태학적으로 유효하게 만들 수 있는가?
• RQ2 모바일 웨어러블 기기를 활용한 정서 컴퓨팅 시스템에서의 주요 기술적 및 방법론적 발전은 무엇인가?
• RQ3 현재의 시스템들은 사회적 상호작용적 맥락을 통합함으로써 '투과 불가능한 정서' 문제를 어떻게 해결하고 있는가?
• RQ4 실생활 모바일 환경에 정서 컴퓨팅 시스템을 구현할 때의 제한 사항과 열린 과제는 무엇인가?

주요 결과

• 모바일 및 웨어러블 기기는 통제된 실험실 환경의 한계를 넘어 자연스럽고 사회적이며 역동적인 환경에서 정서를 연구할 수 있도록 한다.
• 다양한 생리적 및 행동 신호를 융합함으로써 실생활 조건에서 정서 인식의 정확성과 강건성을 향상시킨다.
• 사회적 상호작용과 환경적 요인을 고려한 맥락 인지 시스템은 정서 컴퓨팅 응용 분야에서 더 높은 관련성과 신뢰성을 보인다.
• 진전이 있었음에도 불구하고, 데이터 프라이버시, 실시간 처리, 다양한 인구 집단 및 맥락으로의 일반화 문제 등 여전히 과제가 남아 있다.