[논문 리뷰] Multimedia stimuli databases usage patterns: a survey report

Marko Horvat, Siniša Popović외 1명|arXiv (Cornell University)|2013. 03. 20.

Advanced Text Analysis Techniques참고 문헌 11인용 수 15

한 줄 요약

이 논문은 정서적 멀티미디어 데이터베이스의 사용 패턴을 정서 컴퓨팅 및 인지 과학 분야의 130명의 연구자들을 대상으로 한 설문 조사로 조사한다. 연구 결과, 기존 데이터베이스의 정서적 및 의미적 내용이 부족하여 광범위한 불만이 존재하는 것으로 드러났으며, 응답자의 73.33%는 핵심 정서적 또는 의미적 특성이 누락되어 있다고 밝혔고, 84%는 실제 생활 영상 자료를 사용하고 싶다고 표현했다. 본 연구는 정서적 연구의 실험 효율성과 데이터 품질 향상을 위해 지능적이고 의미 인식 기반의 검색 시스템이 긴급히 필요하다고 결론내린다.

ABSTRACT

Multimedia documents such as images, sounds or videos can be used to elicit emotional responses in exposed human subjects. These stimuli are stored in affective multimedia databases and successfully used for a wide variety of research in affective computing, human-computer interaction and cognitive sciences. Affective multimedia databases are simple repositories of multimedia documents with annotated high-level semantics and affective content. Although important all affective multimedia databases have numerous deficiencies which impair their applicability. To establish a better understanding of how experts use affective multimedia databases an online survey was conducted into the subject. The survey results are statistically significant and indicate that contemporary databases lack stimuli with rich semantic and emotional content. 73.33% of survey participants find the databases lacking at least some important semantic or emotion content. Most of the participants consider stimuli descriptions to be inadequate. Overall, 1-2h or more than 24h are generally needed to construct a single stimulation sequence. Almost 84% of the survey participants would like to use real-life videos in their research. Experts unequivocally recognize the need for an intelligent stimuli retrieval application that would assist them in experimentation. Almost all experts agree such applications could be useful in their work.

연구 동기 및 목표

• 정서 컴퓨팅 및 인지 과학 연구 분야에서 정서적 멀티미디어 데이터베이스를 사용하는 현재의 사용 패턴과 과제를 이해하기 위해.
• 의미적 풍부함과 정서적 내용과 관련된 기존 데이터베이스의 결함을 특정하기 위해.
• 자극의 품질, 기술의 적합성, 자극 시퀀스 제작에 소요되는 시간 투자에 대한 연구자의 필요를 평가하기 위해.
• 실험 설계를 지원하기 위해 지능적인 자극 검색 응용 프로그램에 대한 수요를 평가하기 위해.

제안 방법

• 정서 컴퓨팅, 인간-컴퓨터 상호작용 및 인지 과학 분야의 전문가 130명에게 온라인 설문 조사를 실시함.
• 설문 항목은 데이터베이스 사용, 인식된 결함, 자극 기술의 품질, 자극 시퀀스 제작에 소요되는 시간, 자극 유형 선호도에 중점을 두었음.
• 통계적 방법을 사용하여 데이터를 수집 및 분석하여 연구자 행동과 기대에 대한 유의미한 추세와 패턴을 규명함.
• 미래의 자극 검색 시스템에 바라는 기능, 예를 들어 의미적 및 정서적 내용 지원에 대한 질문을 포함함.
• 결과는 수치적 백분율과 참가자들의 질적 피드백에 중점을 두고 집계 및 보고함.
• 연구 결과는 정서 컴퓨팅 및 멀티미디어 연구 분야의 광범위한 맥락 속에서 해석됨.

실험 결과

연구 질문

• RQ1 전문 연구자들의 관점에서 현재 정서적 멀티미디어 데이터베이스의 주요 결함는 무엇인가요?
• RQ2 연구자들은 현재 자극 시퀀스를 제작하기 위해 시간을 어떻게 사용하고 있으며, 비효율성을 초래하는 요인은 무엇인가요?
• RQ3 연구자들이 기존 자극의 정서적 및 의미적 내용이 부족하다고 얼마나 인식하고 있나요?
• RQ4 연구자들이 선호하는 자극 유형(예: 실제 생활 영상)은 무엇이며, 그 이유는 무엇인가요?
• RQ5 정서 연구 분야에서 지능적인 자극 검색 응용 프로그램에 대한 수요는 어느 정도인가요?

주요 결과

• 설문 응답자 중 73.33%가 기존 정서적 멀티미디어 데이터베이스에서 적어도 일부 중요한 의미적 또는 정서적 내용이 부족하다고 보고함.
• 대부분의 연구자들이 실험적 필요에 부합하지 않는 자극 기술을 고려함.
• 응답자 약 84%가 자신의 연구에서 실제 생활 영상 자료를 사용하고 싶다고 표현함.
• 단일 자극 시퀀스를 제작하는 데 일반적으로 1~2시간 또는 24시간 이상의 시간 투자가 필요함을 시사함.
• 거의 모든 전문가가 자신의 연구 워크플로우에서 지능적인 자극 검색 응용 프로그램이 유용할 것이라고 동의함.
• 본 연구는 의미 인식 기반의 정서적으로 지능적인 데이터베이스 검색 도구 개발에 대해 강력한 공감대가 있음을 확인함.