[論文レビュー] Critical Reflections on Visualization Authoring Systems

Arvind Satyanarayan, Bongshin Lee+6 more|arXiv (Cornell University)|Jul 31, 2019

Data Visualization and Analytics参考文献 39被引用数 7

ひとこと要約

本論文は、Lyra、Data Illustrator、Charticulatorという3つのインタラクティブ可視化作成システムについて、表現力、習得性、再利用可能性の間の設計的妥当性についての鋭い考察を提示している。共通の仮定や実装上の選択、システム間の影響を検討することで、個々のシステム論文に明示されていない、洗練された設計意思決定の裏側を明らかにし、今後の可視化作成システム研究のための新たな評価フレームワークを提案する。

ABSTRACT

An emerging generation of visualization authoring systems support expressive information visualization without textual programming. As they vary in their visualization models, system architectures, and user interfaces, it is challenging to directly compare these systems using traditional evaluative methods. Recognizing the value of contextualizing our decisions in the broader design space, we present critical reflections on three systems we developed -- Lyra, Data Illustrator, and Charticulator. This paper surfaces knowledge that would have been daunting within the constituent papers of these three systems. We compare and contrast their (previously unmentioned) limitations and trade-offs between expressivity and learnability. We also reflect on common assumptions that we made during the development of our systems, thereby informing future research directions in visualization authoring systems.

研究の動機と目的

• 従来の評価手法では、多様なアーキテクチャとインタラクションモデルを有する複雑なインタラクティブ可視化作成システム同士を比較することが不適切であるという課題に対処する。
• Lyra、Data Illustrator、Charticulatorという3つの異なるシステムの開発者たちの内省的考察を通じて、それらの共通点と相違点に起因する設計的洞察を抽出・明示する。
• これらのシステムの設計を形作った共通の根幹的仮定を特定・分析し、それらが表現力、習得性、再利用可能性の間の妥当性にどのように影響を与えたかを明らかにする。
• 批判的考察をインタラクティブ可視化システムの評価手法として、標準的な使いやすさテストや比較実験よりも豊かな洞察を提供する代替手法として有効であると提唱する。
• 今後の研究を支援するため、見過ごされがちな設計の妥当性を暴露し、バージョン管理の統合、推薦システム、意味的エクスポートフォーマットといった新たな方向性を示唆する。

提案手法

• 3つの独立して開発された可視化作成システムにわたる、後向き的かつ共同的な批判的考察を、著者たちの内部的視点を活用して実施する。
• 利用可能なマーク、データバインディングメカニズム、スケールの露出、レイアウト指定技術といったシステム部品を比較し、設計上の相違点と類似点を同定する。
• システム間の特徴の取り入れ方を分析する。例えば、CharticulatorがLyraとData Illustratorの両方のデータバインディングモデルを統合している事例を示し、システム間の影響を強調する。
• テンプレートベースの再利用メカニズムを評価する。LyraのVega JSONベースの仕様と、CharticulatorのPower BI互換テンプレートを対象とし、再利用可能性とデータスキーマ依存性を検証する。
• SVG、PNG、JSONといったエクスポートフォーマットの忠実性と相互運用性を評価し、ラスタライズドまたはSVGエクスポート時に意味的意味やデータセットリンクの喪失といった制限を特定する。
• 設計の根拠（破棄されたプロトタイプや代替インタラクションモデルを含む）を内省することで、最終的な設計選択の背後にある洗練された意思決定の理由を明らかにする。

実験結果

リサーチクエスチョン

• RQ1 Lyra、Data Illustrator、Charticulatorの設計意思決定は、表現力と習得性のバランスをどのように取り、それらに伴うどのような妥当性を伴うのか？
• RQ2 これらのシステムの設計を形作った共通の仮定は何であり、それらの仮定が特定の設計選択を制限または可能にする仕組みは何か？
• RQ3 批判的考察は、インタラクティブ可視化システムにおいて、従来の比較評価手法の代替としてどれほど有効に機能するのか？
• RQ4 これらのシステムのエクスポートおよびテンプレートメカニズムは再利用性をどのように支援しており、異なるデータ入力において意味的・構造的忠実性を保つためにどのような制限があるのか？
• RQ5 これらのシステム開発時に採択された基礎的仮定を緩和することで、どのような今後の研究の機会が生じるのか？

主な発見

• 3つのシステムは、スケールの露出や複雑なレイアウトの指定方法において顕著な差異を示しており、Lyraは宣言的で構造的なモデリングを重視し、Charticulatorは直接操作を重視する一方、Data Illustratorはハイブリッドアプローチを採用している。
• 共通の目的を有するにもかかわらず、データバインディングの方法には顕著な相違がある。Lyraは宣言的でスキーマに依存するモデルを採用し、Data Illustratorは視覚的でドラッグベースのバインディングを採用し、Charticulatorは2つの異なるメカニズムを統合することで両方のアプローチを組み合わせている。
• SVGやラスタライズド画像としての可視化エクスポートは、データセットリンクや意味的意味の喪失を引き起こし、再利用可能性や新しいデータやフォームファクターへの適応性を制限する。
• Lyra（Vega JSONベース）とCharticulator（カスタムJSONおよびPower BIビジュアル）におけるテンプレートベースの再利用は、異なるデータで新たな可視化を可能にするが、テンプレートは元のスキーマ構造に強く束縛されている。
• 批判的考察により、設計選択はしばしば独立した機能ではなく、重ねられた相互に接続された意思決定の結果であることが明らかになった。このため、個々の論文からの洞察だけでは完全な理解が得られないことがわかった。
• 著者らは、批判的考察が、標準的な使いやすさテストや比較研究よりも深い設計の根拠と妥当性を明らかにする価値ある評価手法であると結論づける。