[論文レビュー] External Use of TOPCAT's Plotting Library

Mark Taylor|arXiv (Cornell University)|Oct 30, 2014

Scientific Research and Discoveries参考文献 1被引用数 3

ひとこと要約

この論文は、TOPCATのカスタムJavaプロットライブラリを外部で使用する方法を提示しており、コマンドライン（STILTS）、Jython（JyStilts）、Java API、またはプロセス間通信を通じて、最大数十億ポイントの大きなデータセット（最大数十億行）の高パフォーマンスでインタラクティブかつ静的可視化を可能にする。ライブラリは、スケーラブルで設定可能な2次元および3次元プロットをサポートし、ハイブリッドな散布図/密度レンダリングや効率的なメモリ使用法を備えており、全天空密度マップ（20億行）のレンダリングに約30分を要する。

ABSTRACT

The table analysis application TOPCAT uses a custom Java plotting library for highly configurable high-performance interactive or exported visualisations in two and three dimensions. We present here a variety of ways for end users or application developers to make use of this library outside of the TOPCAT application: via the command-line suite STILTS or its Jython variant JyStilts, via a traditional Java API, or by programmatically assigning values to a set of parameters in java code or using some form of inter-process communication. The library has been built with large datasets in mind; interactive plots scale well up to several million points, and static output to standard graphics formats is possible for unlimited sized input data.

研究の動機と目的

• 科学者や開発者がTOPCATの高パフォーマンスプロットライブラリをTOPCATのGUI環境外でも利用できるようにすること。
• 最大数十億行の大きなデータセット（最大数十億行）を、最小限のメモリオーバーヘッドでインタラクティブおよび静的可視化すること。
• さまざまなアプリケーション環境に対応するための柔軟な統合方法（コマンドライン、Jython、Java API、プロセス間通信）を提供すること。
• UIコードの変更なしにプロットタイプ、レイヤー、パラメータの拡張性と設定可能性を保証すること。
• 巨大なデータセットからの複雑な可視化（例：密度マップ、スペクトログラム）を効率的にレンダリングできること。

提案手法

• パラメータベースのインターフェース（キー値ペアによる指定）を備えたコマンドラインツールSTILTSを通じて、TOPCATプロットライブラリを公開すること。
• Jython互換のインターフェース（JyStilts）を提供し、プロットパラメータと制御構造への完全なアクセスを可能にすること。
• マップオブジェクトを介してパラメータ名-値ペアを渡すことで、直接Java API統合を可能にし、文字列値に加え、スターテーブル実装などのネイティブJavaオブジェクトもサポートすること。
• Javadocでドキュメント化された詳細なJava APIを用いて、コンパイル時の型チェックを伴う完全なカスタマイズを可能にする低レベルのプログラム的制御を提供すること。
• プラグイン可能でオブジェクト指向のインターフェース設計を採用し、プロットタイプ、レイヤー、設定オプションの動的発見を可能にし、拡張性を確保すること。
• インタラクティブなSwingベースのGUIコンポonentと、アニメーション対応のPNG、GIF、JPEG、PDF、またはPostScript形式の静的出力を両方生成すること。

実験結果

リサーチクエスチョン

• RQ1 TOPCATの高パフォーマンスプロットライブラリを、そのネイティブGUI環境外でどのように利用可能にすることができるか？
• RQ2 科学的アプリケーションにおけるプロットライブラリの外部利用を可能にするために、最も効果的な統合パターンは何か？
• RQ3 無制限のサイズのデータセットを、効率的なメモリ使用と妥当なパフォーマンスで可視化できるか？
• RQ4 一貫性があり、拡張可能で発見可能なAPIを用いて、複雑でインタラクティブかつ静的可視化をどのように生成できるか？
• RQ5 20億行の非常に大きなデータセットを静的出力形式でレンダリングする際のパフォーマンス特性はどのようなものか？

主な発見

• プロットライブラリは、数百万ポイントに達するデータセットのインタラクティブ可視化を成功裏に実現し、高い応答性を維持している。
• 静的出力生成は無制限のサイズのデータセットをサポートしており、20億行の全天空密度マップが約30分でレンダリングされた。
• ハイブリッドな散布図/密度プロットは、標準的な散布図では不可能な極めて大きなデータセットに対しても意味のある視覚的表現を提供する。
• コマンドラインインターフェース（STILTS）を用いることで、4つのパラメータのみで簡単なプロットを生成でき、複雑な可視化に対しても完全な設定が可能である。
• Jythonインターフェース（JyStilts）により、Pythonワークフローへのシームレスな統合が可能となり、制御構造や動的パラメータ代入が可能である。
• 低レベルのJava APIは完全なプログラム的制御とコンパイル時の型セーフティを提供するが、基本的なプロット作成には50～100行のコードが必要となる。