[論文レビュー] The MDS Queue

Nihar B. Shah, Kangwook Lee+1 more|arXiv (Cornell University)|Nov 23, 2012

Advanced Data Storage Technologies被引用数 4

ひとこと要約

本稿では、ホットで頻繁にアクセスされるデータ向けのエラー訂正コード化データストレージシステムの遅延性能を分析するため、MDSキュー・モデルを導入する。キューイング理論を応用して、平均遅延をきめ細かく制御するスケジューリング方針を提案し、MDSコードがストレージコストと低遅延アクセスの両立を効果的に行えることを示している。

ABSTRACT

In order to scale economically, data centers are increasingly evolving their data storage methods from the use of simple data replication to the use of more powerful erasure codes, which provide the same level of reliability as replication but at a significantly lower storage cost. In particular, it is well known that Maximum-Distance-Separable (MDS) codes, such as Reed-Solomon codes, provide the maximum storage efficiency. While the use of codes for providing improved reliability in archival storage systems, where the data is less frequently accessed (or so-called cold data), is well understood, the role of codes in the storage of more frequently accessed and active hot data, where latency is the key metric, is less clear. In this paper, we study data storage systems based on codes through the lens of queueing theory, and term this the MDS queue. We analytically characterize the (average) latency performance of queues, for which we present insightful scheduling policies that form upper and lower bounds to performance, and are observed to be quite tight. Extensive simulations are also provided and used to validate our theoretical analysis. We also employ the framework of the queue to analyse different methods of performing so-called degraded reads (reading of partial data) in distributed data storage.

研究の動機と目的

• エラー訂正コード、特にリード・ソロモンを含むMDSコードが、遅延が重要なホット（アクティブ）データストレージにおいて果たす役割を理解すること。
• キューイング理論を用いて、コード化ストレージシステムの遅延動作をモデル化・分析し、MDSキューという概念を導入すること。
• コード化ストレージシステムにおける平均遅延性能のタイトな上限および下限を提供するスケジューリング方針を策定すること。
• 分散ストレージにおいて、劣化リード（部分的なデータ取得）がシステム遅延に与える影響を、MDSキュー・フレームワークを用いて評価すること。

提案手法

• データリクエストがキューに並び、特定のスケジューリング方針に従って処理されるキューイングシステムとして、MDSコードを用いたデータストレージシステムをモデル化する。
• 理論的分析とシミュレーションによる検証を併用して、キューイング理論を応用し、平均遅延の上限・下限を導出する。
• MDSコーディングの制約を満たしつつ性能を最適化するスケジューリング方針を提案し、遅延のタイトな上限および下限を形成する。
• 劣化リードの概念をキューイングモデルに統合し、応答時間およびシステム効率への影響を評価する。
• 広範なシミュレーションを用いて、理論的遅延バウンズの妥当性を検証し、さまざまなワークロードおよびコードパラメータにおける性能を評価する。
• 同じキューイングフレームワーク下で、レプリケーションと比較することにより、ストレージ効率と遅延のトレードオフを分析する。

実験結果

リサーチクエスチョン

• RQ1 MDSコードを用いることで、レプリケーションと比較してホットデータストレージシステムにおける平均遅延はどのように変化するか？
• RQ2 理論的性能バウンズを維持しつつ、MDSコード化ストレージシステムにおける遅延を最小化するためのスケジューリング方針はどのように設計できるか？
• RQ3 部分的なデータ取得（劣化リード）が、コード化ストレージキュー全体の遅延および性能に与える影響は何か？
• RQ4 理論的遅延バウンズが、シミュレートされたコード化ストレージシステムにおける実世界の性能をどの程度タイトに近似できるか？
• RQ5 ホットデータワークロードにおいてMDSコードを用いる場合、ストレージ効率と遅延のトレードオフはどのように変化するか？

主な発見

• 提案されたスケジューリング方針は、平均遅延のタイトな上限および下限を形成しており、理論的および実験的整合性が強いことを示している。
• MDSコード化ストレージシステムは、大幅に低いストレージコストを維持しつつ、レプリケーションと同等の低遅延性能を達成できる。
• 劣化リードは、一部のデータを事前に取得可能にすることで、特定の状況下で遅延を低減できるが、その有効性はシステム負荷およびコードパラメータに依存する。
• 理論的分析とシミュレーションの両方から、MDSキュー・モデルがさまざまなワークロードにおいてシステム動作を正確に予測できることを示している。
• 最適なスケジューリングと組み合わせることで、MDSコードがホットデータストレージに実用的であることがフレームワークによって明らかになった。これは、低遅延を達成するにはレプリケーションが必要であるという仮定に疑問を呈する。
• 導出された性能バウンズは非常にタイトであることが観察され、理論的モデルが実際のシステム動作を密接に反映していることが示された。