[論文レビュー] Framing Visual Musicology through Methodology Transfer

Matthias Miller, Hanna Schäfer+4 more|arXiv (Cornell University)|Aug 21, 2019

Music and Audio Processing参考文献 57被引用数 4

ひとこと要約

本論文は、音楽学とビジュアルアナリティクスを統合する分野として『ビジュアルミュージックォロジー』を提唱し、テキスト、地理空間、時系列、高次元データ分野で確立された可視化技術を、音楽学的問題に適応させるためのメソッドロジックの転用を提案する。主な貢献は、再利用可能なソリューションを特定する構造化されたフレームワークを提供することで、音楽学者と可視化研究者との間で協働的イノベーションを促進するとともに、研究ギャップと今後の機会を浮き彫りにすることにある。

ABSTRACT

In this position paper, we frame the field of Visual Musicology by providing an overview of well-established musicological sub-domains and their corresponding analytic and visualization tasks. To foster collaborative, interdisciplinary research, we discuss relevant data and domain characteristics. We give a description of the problem space, as well as the design space of musicology and discuss how existing problem-design mappings or solutions from other fields can be transferred to musicology. We argue that, through methodology transfer, established methods can be exploited to solve current musicological problems and show exemplary mappings from analytics fields related to text, geospatial, time-series, and other high-dimensional data to musicology. Finally, we point out open challenges, discuss research gaps, and highlight future research opportunities.

研究の動機と目的

• 音楽学とビジュアルアナリティクスの交差点に位置する、明確な分野としてのビジュアルミュージックォロジーを位置づけること。
• テキスト、地理空間、時系列、高次元データなどの他の分野から、既存の可視化ソリューションを特定し、マッピングすることで、音楽学的問題に応用すること。
• 可視化の分野としての音楽学の未発達な状態に歯止めをかけ、実証済みの技術を再利用可能な形で活用できるメソッドロジック転用モデル（MTM）を提案すること。
• ビジュアルミュージックォロジーにおける研究ギャップと未解決の課題を浮き彫りにし、音楽学者と可視化研究者との間で新たな協働的研究を促進すること。
• ビジュアルアナリティクスの潜在能力を示し、大規模かつ多様な音楽学的データセットにおいて複雑なパターンを音楽学者が同定できる可能性を実証すること。

提案手法

• 本論文は、データの特性、ユーザーのニーズ、分野、目的を分析することで、ビジュアルミュージックォロジーの問題空間とデザイン空間を定義し、TextVisなどの既存フレームワークに類似した手法を用いる。
• テキスト、地理空間、時間的、高次元データ応用におけるデータタイプ、分析的タスク、可視化の課題を比較することで、音楽学と他の分野との類似性を特定する。
• メソッドロジック転用モデル（MTM）を適用し、音楽学とは関係のない分野から既存の可視化ソリューションを音楽学的ユースケースにマッピングすることで、再利用と適応を可能にする。
• テキスト、時系列、高次元データアナリティクスからの可視化技術が、音楽学的問題にどのように転用できるかを示す、3つの代表的ユースケースを提示する。
• 本アプローチは、ドメイン駆動設計を重視しており、可視化手法を不適切な文脈に押し込むのでなく、音楽学的ニーズに従って手法を適応させる。
• フレームワークは、音楽学者をドメインエキスパート、可視化研究者をメソドロジカルパートナーとして位置づけ、共同開発による新ツールの創出を促進する。

実験結果

リサーチクエスチョン

• RQ1 テキスト、地理空間、時系列、高次元データといった成熟した分野から得られた可視化技術を、音楽学的研究問題に意味的に転用する方法は何か？
• RQ2 データ、ユーザー、分析的目標という観点から、音楽学と他の可視化分野との問題空間における主な類似点と相違点は何か？
• RQ3 音楽の構造、感情、パフォーマンスジェスチャーといった音楽学的タスクに、既存分野のどの可視化ソリューションが最も容易に適応可能か？
• RQ4 直接的転用では対応できない、ビジュアルミュージックォロジーにおける主要な研究ギャップは何か？こうしたギャップを埋めるために、新規の可視化技術が必須となる分野は？
• RQ5 音楽学者と可視化研究者との間で、相互の利益とイノベーションを最大化するための協働体制をどのように構築すべきか？

主な発見

• 音楽学における可視化の分野は、データの増加と複雑な分析ニーズが高まる中で、他の分野と比較して未だに未発達な状態にあり、専用の可視化研究が限られている。
• テキスト、地理空間、時系列、高次元データ分野から得られた既存の可視化技術は、音楽学的問題に意味的に転用可能であり、即時のイノベーションの道筋を提供する。
• メソッドロジック転用により、可視化分野における数十年にわたる先行研究を活用できるようになり、重複した開発を回避し、音楽学分野の進展を加速できる。
• ビジュアルアナリティクスの統合により、パフォーマンスジェスチャー、感情反応、大規模な音楽コレクションといった複雑なデータセットの探索と解釈能力が、音楽学者にとって顕著に向上する。
• 提案されたMTMフレームワークは、身体的音楽認知やマルチモーダル音楽データといった分野で、新たな可視化技術の開発が不可欠である研究ギャップを明確に特定している。
• 音楽学者と可視化研究者との協働は、単なる利点を越えて、両分野の前進に不可欠であり、音楽学は独自で複雑な問題を提供し、可視化研究は実証済みのメソドロジカルツールを提供する。