[논문 리뷰] Sonification Abstraite/Sonification Concrète: An 'Aesthetic Perspective Space' for Classifying Auditory Displays in the Ars Musica Domain

Paul Vickers, Bennett Hogg|arXiv (Cornell University)|2013. 11. 21.

Tactile and Sensory Interactions참고 문헌 18인용 수 44

한 줄 요약

이 논문은 청각적 디스플레이를 분류하기 위해 음악 예술 분야인 아르스 무지카 도메인에 소니피케이션을 매핑함으로써 '미학적 시점 공간'을 제안한다. 이를 통해 음악의 구성 및 미학 원칙을 이행함으로써 소니피케이션 설계를 향상시킨다. 소니피케이션을 예술적 작품으로 간주함으로써, 음악의 구조적 및 톤 볼륨 조직 원칙을 활용해 청각 생태계, 청취자 참여도, 의사소통 효과성을 향상시킨다.

ABSTRACT

This paper discusses æsthetic issues of sonifications and the relationships between sonification (ars informatica) and music & sound art (ars musica). It is posited that many sonifications have suffered from poor internal ecological validity which makes listening more difficult, thereby resulting in poorer data extraction and inference on the part of the listener. Lessons are drawn from the electroacoustic music and musique concrète communities as it is argued that it is not instructive to distinguish between sonifications and music/sound art.

연구 동기 및 목표

• 소니피케이션 설계에서의 미학적 및 청각 생태학적 고려 부족으로 인해 효과적인 데이터 인지가 저해됨을 해결하기 위해.
• 소니피케이션과 음악/사운드 아트가 조직된 소리의 사용에서 본질적으로 다를 바가 없음을 주장하기 위해.
• 소니피케이션을 아르스 무지카 도메인에 매핑함으로써 미학적 분석과 설계 향상을 가능하게 하는 프레임워크를 개발하기 위해.
• 음악 교육과 미학적 인식이 청각 디스플레이의 의사소통 능력을 향상시킨다는 것을 입증하기 위해.
• 소니피케이션 설계자가 작곡가, 사운드 디자이너, 레코딩 엔지니어와 유사한 청취 관행을 채택하도록 장려하기 위해.

제안 방법

• 소니피케이션을 추상적/구체적(지표적) 축을 따라 매핑하는 '미학적 시점 공간'을 제안하며, 아르스 무지카 도메인의 장르와 대응시킨다.
• 전기음향 음악과 무지크 콘크레트를 기준점으로 삼으며, 전통적인 톤 구조보다는 스펙트로-모르포로지컬 및 톤 볼륨 조직을 강조한다.
• 샤프의 및 키옹의 청취 모드—특히 원인 청취와 감소 청취—를 적용하여 데이터 모방적 인지와 사운드 속성 중심 인지 간의 차이를 구분한다.
• 바레제, 샤페, 슈름과 같은 아르스 무지카의 유명 작품을 심층 분석하여 톤 볼륨 대비, 공간화, 시간적 구조 등 조직 원칙을 도출한다.
• 소니피케이션을 해당하는 미학적 장르에 매핑하여 공통된 구조적 및 인지적 특성을 식별한다.
• 프레임워크를 활용해 소니피케이션과 음악 작품(예: 헤이워드의 지진파형과 샤페의 사운드스케이프)을 비교함으로써 설계 유사성과 적용 가능한 전략을 드러낸다.

실험 결과

연구 질문

• RQ1 조직된 소리를 공유하는 점을 고려할 때, 소니피케이션은 음악 및 사운드 아트와 어떻게 의미 있게 분류될 수 있는가?
• RQ2 소니피케이션의 미학적 및 청각 생태학적 특성이 청취자 인지 및 데이터 추출에 어느 정도 영향을 미치는가?
• RQ3 전기음향 음악과 무지크 콘크레트에서 유래한 구성 및 조직 원칙은 소니피케이션 설계 향상에 어떻게 이식될 수 있는가?
• RQ4 왜 더 높은 미학적 일관성을 지닌 소니피케이션은 더 높은 청취자 참여도와 낮은 인지 피로를 유도하는가?
• RQ5 청각 디스플레이 설계에서 '청취'는 단순한 '청각'과 어떻게 다를 수 있으며, 이를 재정의함으로써 데이터 이해를 어떻게 향상시킬 수 있는가?

주요 결과

• 강한 미학적 일관성과 잘 구성된 청각 생태계를 지닌 소니피케이션은 데이터 인지에 더 효과적이며 청취자 피로를 감소시킨다.
• 음악적으로 유능한 디자이너의 참여는 소니피케이션의 미학적 및 의사소통 품질을 크게 향상시킨다.
• 소니피케이션을 아르스 무지카 도메인에 매핑함으로써 슈름의 '오션에서 온 음악'과 헤이워드의 지진파형과 같은 작품과의 구조적 유사성을 드러내며, 공통된 설계 원칙을 시사한다.
• 전기음향 음악과 실체 음악 전통은 단순한 음높이-데이터 매핑을 넘어서 스펙트로-모르포로지컬 및 톤 볼륨 제어를 통해 소리의 조직화에 유용한 프레임워크를 제공한다.
• 이 프레임워크는 음악 장르의 '미학적 분석'을 가능하게 하며, 공간화, 톤 볼륨 대비, 시간적 배치 등의 원칙을 도출하여 소니피케이션의 명확성을 향상시킨다.
• 부적절한 미학적 설계—예를 들어, 가림 톤 볼륨이나 혼란스러운 청각 생태계—는 데이터 추론을 방해할 수 있으며, 지나치게 음악적인 소니피케이션은 데이터 내용에서 주목을 산산이 부술 수 있다.