[論文レビュー] Ways of Listening and Modes of Being: Electroacoustic Auditory Display

Paul Vickers|arXiv (Cornell University)|Nov 21, 2013

Music Technology and Sound Studies被引用数 12

ひとこと要約

本稿は、電気音響聴覚ディスプレイ（データの非言語的音響的表現）が、記号学と美學を援用することで、組織だてられた音の一種として機能することを提案する。聴覚的ディスプレイを身体的で解釈的な実践として分析することで、音響的形態を通じたデータの新たな知覚のあり方を明らかにし、視覚的データ表現に対する現象学的代替案を提示する。

ABSTRACT

Auditory display is concerned with the use of non-speech sound to communicate information. If the term seems at first oxymoronic, then consider auditory display as an activity of perceptualization, that is, the process of making perceptible to humans aspects or features of a given data set or system. Most commonly this is done using visual representations (which process we call visualization) but it is not limited to the visual channel and recent years have witnessed the increased use of auditory representations in the production of tools for exploring data. By way of semiotics and an aesthetic perspective shift this article posits that auditory display may be considered a form of organized sound and explores the listening experience in this context.

研究の動機と目的

• 聴覚的ディスプレイを単なる情報伝達手段としてではなく、芸術的かつ知覚的関与の形態として再定式化すること。
• 電気音響音における聴き方のモードが、データ探索における人間の知覚と認知にどのように影響するかを調査すること。
• 記号学的および美學的枠組みを応用することで、人間-コンピュータインタラクションとサウンドアートを結びつけること。
• 視覚的可視化の優位性に挑戦し、音響的表現の認識論的および体験的価値を示すこと。

提案手法

• 本研究は、記号学的分析を用いて聴覚的ディスプレイを検討し、意味を有する構造的サウンドスケープとして扱う。
• 聴き手が視覚的でない文脈において音にどのように関与するかを検討するために、現象学的および美學的理論を援用する。
• 著者は、構造的・知覚的特性に重点を置き、具体的な電気音響聴覚ディスプレイを組織だてられた音の例として分析する。
• 知覚的関与の違いを浮き彫りにするために、視覚的および聴覚的表現モードを比較分析する。
• 視覚による可視化に類似する、データを音によって知覚可能にする「知覚化」の形式として聴覚的ディスプレイを位置づける。
• 理論的基盤は、サウンドスタディズ、HCI、および現代音楽学から得られ、概念的転換を支援する。

実験結果

リサーチクエスチョン

• RQ1 電気音響聴覚ディスプレイを聴くことと視覚的データ解釈との間で、認知的および知覚的関与の観点からどのような違いがあるか？
• RQ2 聴覚的ディスプレイが、美學的および記号学的意義を有する組織だてられた音の形態としてどのように理解されるか？
• RQ3 異なる聴き方のモードが、ユーザーが音を通じてデータを体験し解釈する方法にどのように影響するか？
• RQ4 身体性と現象学が、聴覚的ディスプレイインタラクションにおいて果たす役割は何か？
• RQ5 視覚的手段と比較して、聴覚的ディスプレイが複雑なデータを理解するための代替的認識論的道筋をどのように提供するか？

主な発見

• 聴覚的ディスプレイは、情報伝達の技術的ツールとしての役割を超えて、組織だてられた音の一種として機能する。
• 聴覚的ディスプレイを聴くことは、身体的で能動的な知覚を伴い、ユーザーのデータとの在り方を形作る。
• 本研究は、非視覚的・知覚的チャnelを通じて、音響的表現が複雑なデータ探索を支援できることを示している。
• 電気音響聴覚ディスプレイは、特定の文脈において、従来の可視化よりも豊かで洗練されたデータ関与の形態を可能にする。
• 本稿は、聴覚的ディスプレイが可視化とは認識論的に異なるものであり、音を通じた知る別の方法を提供することを確立している。
• 記号学と美學を統合することで、本稿は聴覚的ディスプレイを芸術的および認知的実践の正当な領域として再位置づけている。