[論文レビュー] Cost Analysis of Redundancy Schemes for Distributed Storage Systems

Lluís Pàmies-Juàrez, Ernst W. Biersack|arXiv (Cornell University)|Mar 14, 2011

Advanced Data Storage Technologies参考文献 27被引用数 9

ひとこと要約

本稿は、分散ストレージシステムにおけるレプリケーション方式のストレージおよび通信コストを分析し、再生コードとハイブリッドレプリケーション・コーディング方式に焦点を当てる。ノードの利用可能性和と帯域幅制約を考慮し、最適な構成を導出する。再生コードは、レプリケーションと比較してコストを20%〜80%まで削減可能であり、最適な修復度 $d$ はノードの稼働時間に依存する。

ABSTRACT

Distributed storage infrastructures require the use of data redundancy to achieve high data reliability. Unfortunately, the use of redundancy introduces storage and communication overheads, which can either reduce the overall storage capacity of the system or increase its costs. To mitigate the storage and communication overhead, different redundancy schemes have been proposed. However, due to the great variety of underlaying storage infrastructures and the different application needs, optimizing these redundancy schemes for each storage infrastructure is cumbersome. The lack of rules to determine the optimal level of redundancy for each storage configuration leads developers in industry to often choose simpler redundancy schemes, which are usually not the optimal ones. In this paper we analyze the cost of different redundancy schemes and derive a set of rules to determine which redundancy scheme minimizes the storage and the communication costs for a given system configuration. Additionally, we use simulation to show that theoretically-optimal schemes may not be viable in a realistic setting where nodes can go off-line and repairs may be delayed. In these cases, we identify which are the trade-offs between the storage and communication overheads of the redundancy scheme and its data reliability.

研究の動機と目的

• 冗長化方式を用いた分散ストレージシステムにおけるストレージコストと通信コストのトレードオフを分析すること。
• ノードの可用性や帯域幅利用度といったシステムパラメータに基づいて、再生コードの最適な構成を特定すること。
• 単純なレプリケーションに比べ、ハイブリッドレプリケーション＋コーディング方式がコスト効率で優れているかどうかを評価すること。
• 現実のノード障害および修復遅延状況下での理論的に最適な方式のスケーラビリティと信頼性を評価すること。
• ストレージ容量や通信帯域幅といったシステム制約に基づいた、冗長化方式選定の実用的ルールを提供すること。

提案手法

• 著者は、再生コードのストレージおよび通信コストを計算するための解析的モデリングを用い、レプリケーションやMDSコードを特別ケースとして含む汎用フレームワークとして扱う。
• ノードの稼働可用性、修復度 $d$、基本修復時間 $B$ を考慮したコスト関数を導出。現実のノード動的特性を組み込む。
• イベントベースのシミュレータを用いて、帯域幅利用度、オブジェクトサイズ、修復度の変動下でのシステム挙動を評価。
• シミュレーションでは、実際の帯域幅利用度、修復時間、およびMSRおよびMBRコードを含むさまざまな構成におけるシステムスケーラビリティを測定。
• 複数のシステムパラメータにおいて、ハイブリッド方式（レプリケーション＋MSRコード）を純粋なレプリケーションおよび再生コードと比較。
• ファイル再構成に必要なノード数 $k$、修復に接触するノード数 $d$、オブジェクトサイズといった主要パラメータを変化させ、コストと信頼性のトレードオフを評価。

実験結果

リサーチクエスチョン

• RQ1 ノードの可用性が変化する条件下で、ストレージおよび通信コストを最小化するための最適な修復度 $d$ は何か？
• RQ2 ハイブリッドレプリケーション＋コーディング方式が、純粋なレプリケーションに比べてコストを削減する条件は何か？
• RQ3 ノードの稼働可用性と帯域幅利用度は、再生コードの信頼性およびパフォーマンスにどのように影響するか？
• RQ4 遅延した修復やノード障害の影響を受ける現実環境下で、理論的に最適な冗長化方式がどれほど実用的でないか？
• RQ5 オブジェクトサイズや保存オブジェクト数は、現実の環境下で修復時間およびシステムスケーラビリティにどのように影響するか？

主な発見

• 再生コードを用いることで、システム全体のコスト（ストレージおよび通信）を、単純なレプリケーションと比較して20%〜80%まで削減可能であり、システム構成に依存する。
• 最適な修復度 $d$ は、修復時間が通常のノード稼働時間より短くなるように小さくする必要がある。これにより、修復中におけるデータ損失を防げる。
• ストレージ容量が制限されるシステムではMSRコードがストレージ効率を最大化するが、通信帯域幅が制限されるシステムではMBRコードが最適である。
• ノードの可用性が99%の場合、$k=5$が最適である。可用性が50%に低下すると、信頼性を維持するには$k=50$が必要となる。
• 高い修復度（$d=36$）では、$d=20$の場合と比較して、同じ構成下で最大10倍のデータ（6452対683オブジェクト）を格納可能である。
• 遅延修復が生じる現実の環境下では、理論的に最適な方式ですらデータの信頼性を確保できない場合があり、コストと耐久性の間の実用的トレードオフの必要性が浮き彫りになる。