[論文レビュー] Rebuilding for Array Codes in Distributed Storage Systems

Zhiying Wang, Alexandros G. Dimakis+1 more|arXiv (Cornell University)|Sep 16, 2010

Advanced Data Storage Technologies参考文献 13被引用数 11

ひとこと要約

本稿では、分散ストレージシステムにおけるEVENODDおよびSTARアレイコードの効率的な修復スキームを提案し、データレイアウトにおける構造的パリティグループ化と対称性を活用することで、修復帯域幅を低減する。2つのパリティノードを有するEVENODDコードでは、ナードリコンストラクションよりも著しく少ない帯域幅である$\frac{3}{4}M + O(M^{1/2})$を達成し、ディスクI/Oを最小限に抑え、複雑な線形結合を回避する。

ABSTRACT

In distributed storage systems that use coding, the issue of minimizing the communication required to rebuild a storage node after a failure arises. We consider the problem of repairing an erased node in a distributed storage system that uses an EVENODD code. EVENODD codes are maximum distance separable (MDS) array codes that are used to protect against erasures, and only require XOR operations for encoding and decoding. We show that when there are two redundancy nodes, to rebuild one erased systematic node, only 3/4 of the information needs to be transmitted. Interestingly, in many cases, the required disk I/O is also minimized.

研究の動機と目的

• アレイコードを用いた分散ストレージシステムにおいて、障害発生ノードを再構築するために必要な通信コスト（修復帯域幅）を低減すること。
• EVENODDおよびSTARコードにおける構造的対称性を活用して、ノード修復中のディスクI/Oを最小限に抑えること。
• データブロック内の複雑な線形結合を避ける修復手法を開発し、計算効率を高めるために単純なXORベースの演算を優先すること。
• ナードリコンストラクションよりも著しく帯域幅を低減できることを実証すること、かつ大規模な有限体を必要としないこと。
• MDSアレイコードにおける単一および二重ノード障害の両方の状況に、修復戦略を拡張すること。

提案手法

• EVENODDおよびSTARコードの対称的構造を活用し、列の再順序付けにより修復グループを中央の対称軸に合わせること。
• 特定のパリティグループ（例：$B_{jx,0}, B_{jx,1}, B_{jx,-1}$）を同定し、障害発生したシステムノードの欠落ブロックを総合的に回復可能にする。
• モジュロ算術および行インデックス（例：$<i+v(1-j)>$）を用いて、複数のスロープに跨るパリティブロックを定義し、効率的なブロック回復を可能にする。
• 重複するパリティグループを選択することで、すべての欠落ブロックを最小限のデータ送信量でカバーする回復戦略を適用する。
• 列の並べ替え戦略を採用し、修復プロセスを対称化することで、送信が必要なブロック数を削減する。
• 完全なデータ再構築を避けるために、生存ノードから必要なブロックのみを送信することに焦点を当てる。

実験結果

リサーチクエスチョン

• RQ1 単一の障害発生システムノードを再構築する際、EVENODDコードの修復帯域幅をナード送信の$M$ビット未満に抑えることができるか？
• RQ2 コード構造における対称性を活用することで、ノード修復時の通信量とディスクI/Oの両方を低減できるか？
• RQ3 ノード内でのデータの線形結合を避けることができる修復スキームを設計でき、かつ帯域幅をほぼ最適化できるか？
• RQ4 STARコードにおいて二つのノードが同時に障害発生した場合、修復帯域幅はどのようにスケーリングするか？
• RQ5 EVENODDやSTARのような実用的アレイコードにおいて、低計算複雑度と最小限のディスクI/Oを実現する修復スキームを達成できるか？

主な発見

• k = n-2であるEVENODDコードでは、単一の障害発生システムノードの修復に、ナードの$M$ビットよりも著しく少ない$\frac{3}{4}M + O(M^{1/2})$ビットの通信量で十分である。
• 提案された修復手法は、完全なデータ再構築を避けることで、必要なブロックのみを送信することによりディスクI/Oを最小限に抑える。
• ノード内での複雑なデータ線形結合を回避し、エンコーディングおよびデコーディングにXOR演算のみに依存するため、計算効率が向上する。
• STARコードにおける二重ノード障害では、情報ブロックの修復帯域幅は約$\frac{7}{8}M$、パリティブロックでは$\frac{1}{2}$となり、ナードリコンストラクションを上回る性能を示す。
• 理論的カットセット境界からのギャップが$\frac{3p^2}{8}$であるため、近似的に最適な帯域幅を達成しており、さらなる改善の余地があることが示唆される。
• 計算が単純かつ実用的であり、特に小さな有限体において優れた性能を発揮するため、実世界の分散ストレージ展開に適している。