[논문 리뷰] Ways of Listening and Modes of Being: Electroacoustic Auditory Display

Paul Vickers|arXiv (Cornell University)|2013. 11. 21.

Music Technology and Sound Studies인용 수 12

한 줄 요약

이 논문은 전기음향 청각 디스플레이—데이터의 비어있는 소리 표현—가 상징학과 미학을 바탕으로 조직화된 소리의 한 형태로 작용하며, 청각 디스플레이를 인간의 인지와 존재 방식을 형상화하는 청취 방식으로 재정의한다. 신체적이고 해석적인 실천으로서의 청취를 분석함으로써, 이 연구는 청각적 형태를 통해 데이터를 새로운 방식으로 인지할 수 있음을 드러내며, 시각적 데이터 표현에 대한 현상학적 대안을 제공한다.

ABSTRACT

Auditory display is concerned with the use of non-speech sound to communicate information. If the term seems at first oxymoronic, then consider auditory display as an activity of perceptualization, that is, the process of making perceptible to humans aspects or features of a given data set or system. Most commonly this is done using visual representations (which process we call visualization) but it is not limited to the visual channel and recent years have witnessed the increased use of auditory representations in the production of tools for exploring data. By way of semiotics and an aesthetic perspective shift this article posits that auditory display may be considered a form of organized sound and explores the listening experience in this context.

연구 동기 및 목표

• 청각 디스플레이를 정보 전달 수단으로서만 보는 것을 넘어서, 예술적이고 인지적 참여의 형태로 재정의하기 위해.
• 전기음향 음향에서의 청취 방식이 데이터 탐색 과정에서 인간의 인지와 인지에 어떤 영향을 미치는지 조사하기 위해.
• 상징학과 미학적 프레임워크를 청각 디스플레이 설계에 적용함으로써 인간-컴퓨터 상호작용과 소리 예술을 연결하기 위해.
• 시각적 시각화의 지배적 지위를 도전하기 위해, 소리 표현이 지식적이고 경험적 가치를 지닌다는 것을 입증함으로써.

제안 방법

• 논문은 청각 디스플레이를 의미를 지닌 구조적 사운드스케이프로 간주하며, 상징학적 분석을 수행한다.
• 청취자가 비시각적 데이터 환경에서 소리와 어떻게 상호작용하는지 분석하기 위해 현상학적 및 미학적 이론을 활용한다.
• 저자는 조직화된 소리의 예로 특정 전기음향 청각 디스플레이를 분석하며, 그들의 구조적 및 인지적 특성을 강조한다.
• 청취자 인지 참여의 차이를 부각하기 위해 시각적 표현 방식과 청각적 표현 방식을 비교 분석한다.
• 청각 디스플레이를 '인지화'의 형태로 프레임화한다—보는 것과 유사하게, 데이터를 청각적으로 감지할 수 있도록 만드는 것이다.
• 이론적 기반은 청각 연구, HCI, 현대 음악학에서 유래하여 개념적 전환을 뒷받침한다.

실험 결과

연구 질문

• RQ1 전기음향 청각 디스플레이를 청취하는 방식은 인지적 및 인지적 참여 측면에서 시각적 데이터 해석과 어떻게 다를까?
• RQ2 어떤 방식으로 청각 디스플레이는 미학적 및 상징학적 의미를 지닌 조직화된 소리의 형태로 이해될 수 있는가?
• RQ3 다양한 청취 방식은 사용자가 소리로 데이터를 경험하고 해석하는 방식에 어떻게 영향을 미치는가?
• RQ4 신체성과 현상학은 청각 디스플레이 상호작용에서 어떤 역할을 하는가?
• RQ5 청각 디스플레이는 복잡한 데이터를 이해하는 데 있어 시각적 수단과 비교해 어떤 대체 지식론적 길을 제공할 수 있는가?

주요 결과

• 청각 디스플레이는 정보 전달 기술적 도구가 아니라 조직화된 소리의 한 형태로 작용한다.
• 청각 디스플레이를 청취하는 것은 사용자의 데이터와의 존재 방식을 형상화하는 능동적이고 신체적인 인지 과정을 포함한다.
• 연구는 소리의 표현 방식이 비시각적이고 인지적 채널을 통해 복잡한 데이터 탐색을 지원할 수 있음을 입증한다.
• 전기음향 청각 디스플레이는 특정 맥락에서 전통적인 시각화보다 더 풍부하고 세밀한 방식의 데이터 참여를 가능하게 한다.
• 논문은 청각 디스플레이가 시각화와 지식론적으로 구별되며, 소리를 통해 지각하는 다른 방식의 지각을 제공함을 확립한다.
• 상징학과 미학을 통합함으로써, 논문은 청각 디스플레이를 예술적이고 인지적 실천의 정당한 영역으로 재편성한다.