[論文レビュー] Concurrency Control for Adaptive Indexing

Goetz Graefe, Felix Halim+3 more|arXiv (Cornell University)|Mar 29, 2012

Advanced Database Systems and Queries参考文献 23被引用数 4

ひとこと要約

本稿では、アダプティブインデキシングにおける同時実行制御メカニズムを提案する。このメカニズムは、インデックス構造の更新をオプションで、短期間のメモリ内操作として扱い、従来のトランザクションロックを回避する。インデックス構造の最適化をコンテンツの更新から分離し、ワークロードの動的適応を活用することで、並列クエリにおいても性能オーバーヘッドが無視できるほど小さくなる。インデキシングの進化に伴い、同時実行の衝突も時間とともに減少する。

ABSTRACT

Adaptive indexing initializes and optimizes indexes incrementally, as a side effect of query processing. The goal is to achieve the benefits of indexes while hiding or minimizing the costs of index creation. However, index-optimizing side effects seem to turn read-only queries into update transactions that might, for example, create lock contention. This paper studies concurrency control in the context of adaptive indexing. We show that the design and implementation of adaptive indexing rigorously separates index structures from index contents; this relaxes the constraints and requirements during adaptive indexing compared to those of traditional index updates. Our design adapts to the fact that an adaptive index is refined continuously, and exploits any concurrency opportunities in a dynamic way. A detailed experimental analysis demonstrates that (a) adaptive indexing maintains its adaptive properties even when running concurrent queries, (b) adaptive indexing can exploit the opportunity for parallelism due to concurrent queries, (c) the number of concurrency conflicts and any concurrency administration overheads follow an adaptive behavior, decreasing as the workload evolves and adapting to the workload needs.

研究の動機と目的

• 読み取り専用クエリがインデックス構造の更新を引き起こすという、アダプティブインデキシングにおける同時実行オーバーヘッドの課題に対処すること。
• インデックス最適化中に通常発生するロックやトランザクションのオーバーヘッドに関連するパフォーマンスペナルティを低減または排除すること。
• インデックス構造の変更をオプションかつ一時的とみなすことにより、読み取り専用クエリの高同時実行性を実現すること。
• 同時実行制御のオーバーヘッドがワークロードの動的特性に適応し、インデキシングの成熟に伴い減少することを示すこと。
• ワークロードに適応した動的戦略を用いて、アダプティブインデキシングアルゴリズムを選択することで、さらに同時実行性とパフォーマンスを向上させること。

提案手法

• インデックス構造の更新を論理的インデックスコンテンツから分離し、クエリ処理中に物理的設計の変更のみが発生することを保証する。
• 長期的なトランザクションロックの代わりに、メモリ内ラッチを用いて構造的更新を行うことで、競合とオーバーヘッドを最小限に抑える。
• ワークロードパターンに応じてスキップまたは延期可能な、機会的かつ段階的なインデックス最適化を実装する。
• インデキシングの進行に応じてロックの粒度を動的に変更し、時間の経過とともに細粒度の同時実行制御を可能にする。
• 「アクティブ」と「レイジィ」な戦略を導入し、クエリワークロードと同時実行レベルに応じて動的にアルゴリズムを選択する。
• 複数の並列クエリを活用して統合的かつ一括でのインデックス最適化を誘発し、並列性を高め、1回あたりのオーバーヘッドを削減する。

実験結果

リサーチクエスチョン

• RQ1 読み取り専用クエリが構造的更新を引き起こすにもかかわらず、アダプティブインデキシングにおける同時実行制御のオーバーヘッドを無視できる水準まで低減できるか？
• RQ2 アダプティブインデキシングの動的特性は、従来のインデキシングと比較して、同時実行の衝突やロック要件にどのように影響するか？
• RQ3 並列クエリを活用することで、並列性を向上させ、構造的更新のオーバーヘッドをどの程度低減できるか？
• RQ4 並列ワークロード下で「アクティブ」と「レイジィ」な最適化戦略を用いる場合のパフォーマンスインパクトは何か？
• RQ5 ワークロードに適応した動的選択により、アダプティブインデキシングアルゴリズムを切り替えることで、さらに同時実行制御のオーバーヘッドを低減し、スケーラビリティを向上させられるか？

主な発見

• アダプティブインデキシングは、並列クエリワークロード下でもその適応的挙動を維持し、パフォーマンスや最適化品質に劣化がない。
• インデックス構造の進化に伴いロックの粒度が向上するため、時間の経過とともに同時実行の衝突が減少し、競合も低減する。
• システムはワークロード特性に動的に適応し、インデキシングの進行に伴い、同時実行制御のオーバーヘッドが縮小する。
• 並列クエリを活用して一括かつ統合的なインデックス最適化を誘発することで、並列性が向上し、1回あたりのコストが削減される。
• 構造的更新にトランザクションロックの代わりにメモリ内ラッチを用いることで、高同時実行環境下でもパフォーマンスオーバーヘッドが無視できるほど小さくなる。
• 実験的評価により、アダプティブな早期終了と動的アルゴリズム選択が、実際の同時実行制御の課題をさらに軽減することが確認された。