[論文レビュー] On Graph Deltas for Historical Queries

Georgia Koloniari, Dimitris Souravlias+1 more|arXiv (Cornell University)|Feb 22, 2013

Graph Theory and Algorithms参考文献 13被引用数 35

ひとこと要約

本稿では、現在のグラフスナップショットと、ノードおよびエッジの追加・削除を時刻付きで記録した変更ログ（グラフデルタ）のみを格納するグラフデルタモデルを提案する。このアプローチにより、過去のグラフ状態を効率的に再構築でき、履歴クエリの処理が可能になる。デルタベースのクエリプラン、部分的再構築、およびインデキシングを活用することで、全スナップショット再構築に比べてクエリ評価コストを顕著に低減でき、特にノード中心のクエリにおいて顕著である。

ABSTRACT

In this paper, we address the problem of evaluating historical queries on graphs. To this end, we investigate the use of graph deltas, i.e., a log of time-annotated graph operations. Our storage model maintains the current graph snapshot and the delta. We reconstruct past snapshots by applying appropriate parts of the graph delta on the current snapshot. Query evaluation proceeds on the reconstructed snapshots but we also propose algorithms based mostly on deltas for efficiency. We introduce various techniques for improving performance, including materializing intermediate snapshots, partial reconstruction and indexing deltas.

研究の動機と目的

• 大規模かつ動的に変化するグラフに対して、履歴クエリを効率的に評価する課題に対処すること。
• 現在のスナップショットと時刻付きグラフ操作のデルタのみを維持することで、ストレージコストとクエリコストを低減すること。
• すべての歴史的スナップショットを格納せずに、過去のグラフ状態を効率的に再構築できること。
• デルタベースおよび部分的再構築技術を用いて、全スナップショット再構築を最小限に抑えることで、クエリ評価を最適化すること。
• デルタへのインデキシングと中間スナップショットの物質化を用いてパフォーマンスを向上させること。

提案手法

• addNode、addEdge、remNode、remEdge などの操作を含む時刻付きグラフデルタを用いて、グラフの進化をモデル化する。
• 現在のスナップショットに対して、時系列順に関連するデルタ操作を適用することで、過去のスナップショットを再構築する。
• 2段階のクエリプランを提案：まず必要なスナップショットを再構築し、その後再構築されたグラフ上でクエリを評価する。
• 可能な限り全再構築を回避するため、デルタのみまたはデルタ優勢のクエリプランを導入する。
• クエリに必要な部分グラフのみを構築する部分的スナップショット再構築を適用し、ノード中心のクエリにおいて効率を向上させる。
• ノード中心のインデックスを用いてデルタ操作をインデキシングし、検索を高速化し、再構築時間を短縮する。

実験結果

リサーチクエスチョン

• RQ1 すべての過去スナップショットを格納せずに、履歴グラフクエリを効率的に評価する方法は何か？
• RQ2 デルタログから過去のグラフ状態を再構築するコストを最小限に抑える技術は何か？
• RQ3 どのような状況で、再構築されたスナップショットではなくデルタそのもの上でクエリ評価が可能になるか？
• RQ4 部分的再構築はノード中心のクエリにおいてどのようにパフォーランスを向上させるか？
• RQ5 デルタへのインデキシング戦略は、クエリ評価効率にどのような影響を与えるか？

主な発見

• 2段階アプローチ（クエリ評価前にスナップショットを再構築）は、Neo4j などのシステムにおいてトランザクションI/Oのオーバーヘッドが高く、コストがかかる。
• デルタファイルにノード中心のインデックスを適用することで、2段階およびハイブリッドクエリアプローチの両方で顕著なパフォーマンス向上が達成された。
• 部分的再構築により、評価に必要な部分グラフのみを構築するため、ノード中心のクエリにおいて特にコストが削減された。
• 中間スナップショットを物質化することで、頻繁にアクセスされる過去の状態のパフォーマンスが向上し、繰り返しデルタ適用の回数が減少した。
• 全再構築を回避するデルタベースのクエリプランは、特に最近の時刻点において、全スナップショット再構築よりも高い効率性を示した。
• 合成データを用いた実験評価では、スナップショットの年齢が増すほどクエリ実行時間が延び、古い状態を再構築するための操作が増加する傾向が確認された。