[論文レビュー] Towards Scalable Visual Exploration of Very Large RDF Graphs

Nikos Bikakis, John Liagouris+3 more|arXiv (Cornell University)|Jan 1, 2015

Data Visualization and Analytics参考文献 20被引用数 4

ひとこと要約

本稿では、非常に大きなRDFグラフのスケーラブルな可視化を実現するディスクベースのプラットフォーム、graphVizdbを提示する。この手法は、パーティションベースのレイアウト戦略とノード座標のRツリーインデックスを組み合わせることで、効率的な空間クエリ（例：ウィンドウクエリ）を可能にし、表示領域内のみをリアルタイムでレンダリングすることで、ナビゲーションや探索中のレイアウトおよび通信のオーバーヘッドを顕著に削減する。

ABSTRACT

In this paper, we outline our work on developing a disk-based infrastructure for efficient visualization and graph exploration operations over very large graphs. The proposed platform, called graphVizdb, is based on a novel technique for indexing and storing the graph. Particularly, the graph layout is indexed with a spatial data structure, i.e., an R-tree, and stored in a database. In runtime, user operations are translated into efficient spatial operations (i.e., window queries) in the backend.

研究の動機と目的

• メインメモリ容量を超える非常に大きなRDFグラフ（例：3億個以上のノード/エッジを有するWikidata）の可視化という課題に対処する。
• すべてのインタラクションに対して完全なグラフのロードと再レイアウトを必要とする従来のメモリベースの可視化ツールに起因するパフォーマンスボトルネックを克服する。
• バックエンドの空間クエリ最適化を通じて、大規模で高密度なRDFグラフに対する効率的でリアルタイムのナビゲーションと相互作用を可能にする。
• レイアウト計算をレンダリングから分離するため、事前に計算し、データベースに永続化したグラフ座標を用いる。
• グラフ構造に階層的またはクラスタリングに基づく仮定を必要としない汎用的でデータセットに依存しないソリューションを提供する。

提案手法

• メモリ圧力を軽減するため、グラフパーティショニングアルゴリズムを用いて入力RDFグラフをより小さな部分グラフに分割する。
• 各パーティションに対して標準のグラフレイアウトアルゴリズムを独立して適用し、レイアウト中に相互接続エッジ（クロスエッジ）を除外することでパフォーマンスを向上させる。
• 重複を最小限に抑え、総クロスエッジ長を最小化するように、貪欲なアルゴリズムを用いて視覚化されたパーティションをグローバル座標平面に配置・統合する。
• Rツリー空間インデックスを用いて、最終的なノードおよびエッジ座標をリレーショナルデータベース（MySQL）にインデックス化し、空間クエリの効率的評価を実現する。
• ユーザーの操作（例：ズーム、パン）をRツリーインデックス上のウィンドウクエリに変換し、データベースから表示領域内のみのグラフコンponentsを取得する。
• フロントエンドでのレンダリングおよび通信コストを最小限に抑えるために、軽量なJavaScriptライブラリ（mxgraph）を用いて、取得したグラフ断片のみをレンダリングする。

実験結果

リサーチクエスチョン

• RQ1 メインメモリ容量を超える非常に大きなRDFグラフを、どのように効率的に可視化できるか？
• RQ2 空間インデックス技術は、大規模なグラフ可視化におけるナビゲーションおよびレンダリングの高速化に効果的に適用可能か？
• RQ3 パーティションベースのレイアウト戦略は、視覚的整合性を損なわせることなく、レイアウト時間およびメモリ使用量をどれほど削減できるか？
• RQ4 空間的にインデックス化されたグラフ座標に対するウィンドウクエリは、大規模なRDFグラフのリアルタイムでインタラクティブな探索を可能にするか？
• RQ5 多様なRDFデータセットにわたってスケーラブルかつ効率的な、階層的でない一般化されたグラフ可視化アプローチは、どのように実現できるか？

主な発見

• Rツリーインデックス化された座標により、空間的ウィンドウクエリを用いた可視領域の効率的取得が可能となり、バックエンドおよびフロントエンドのデータ転送量が顕著に削減された。
• 事前に計算し、データベースに永続化したレイアウトにより、ナビゲーション中のレイアウト再計算が回避され、低遅延のインタラクションが実現した。
• パーティションベースのレイアウト戦略により、より小さな管理可能な部分グラフに制限されたレイアウト処理によって、大規模なグラフのスケーラブルな処理が可能になった。
• システムはインタラクティブなナビゲーション、マルチレベルの探索、キーワード検索をサポートし、実世界のRDFデータセットにおける実用性を示した。
• MySQL、Jena、Metis、Graphviz、mxgraphを用いたプロトタイプ実装により、提案アーキテクチャの実現可能性およびパフォーマンス上の利点が確認された。