[論文レビュー] Multi-Layer Transformed MDS Codes with Optimal Repair Access and Low Sub-Packetization

Hanxu Hou, Patrick P. C. Lee+1 more|arXiv (Cornell University)|Jul 21, 2019

Advanced Data Storage Technologies参考文献 32被引用数 10

ひとこと要約

本稿では、既存の構成と比較して、大幅に低減されたサブパケット化を実現しながら、任意の単一ノードについて最適なリペアアクセスを達成するマルチレイヤー変換MDSコードを提案する。繰り返し新しい変換技術を適用することにより、特定のパrameterが1より大きい場合、既知の理論的下界を厳密に下回るサブパケット化レベルを持つコードを設計し、特に高レート分散ストレージシステムにおける効率を著しく向上させる。

ABSTRACT

An $(n,k)$ maximum distance separable (MDS) code has optimal repair access if the minimum number of symbols accessed from $d$ surviving nodes is achieved, where $k+1\le d\le n-1$. Existing results show that the sub-packetization $α$ of an $(n,k,d)$ high code rate (i.e., $k/n>0.5$) MDS code with optimal repair access is at least $(d-k+1)^{\lceil\frac{n}{d-k+1} ceil}$. In this paper, we propose a class of multi-layer transformed MDS codes such that the sub-packetization is $(d-k+1)^{\lceil\frac{n}{(d-k+1)η} ceil}$, where $η=\lfloor\frac{n-k-1}{d-k} floor$, and the repair access is optimal for any single node. We show that the sub-packetization of the proposed multi-layer transformed MDS codes is strictly less than the existing known lower bound when $η=\lfloor\frac{n-k-1}{d-k} floor>1$, achieving by restricting the choice of $d$ specific helper nodes in repairing a failed node. We further propose multi-layer transformed EVENODD codes that have optimal repair access for any single node and lower sub-packetization than the existing binary MDS array codes with optimal repair access for any single node. With our multi-layer transformation, we can design new MDS codes that have the properties of low computational complexity, optimal repair access for any single node, and relatively small sub-packetization, all of which are critical for maintaining the reliability of distributed storage systems.

研究の動機と目的

• 高レートMDSコードにおける高いサブパケット化レベルが、分散ストレージシステムへの実用的導入を妨える問題に対処すること。
• 任意の単一ノードについて最適なリペアアクセスを維持しつつ、サブパケット化レベルを低減すること。これは、ノードリペア時のI/Oを最小限に抑えるために不可欠な要件である。
• 一般MDSコードおよびバイナリMDSアレイコード（例：EVENODD）に適用可能な変換フレームワークを構築し、低サブパケット化と最適なリペアアクセスを実現すること。
• 特定のパrameter条件の下で、提案コードが既知の理論的下界を下回るサブパケット化レベルを達成することを示すこと。
• 実世界の分散ストレージシステムにおける高レートMDSコードの実用的導入を可能にし、計算複雑性が低く、効率的なリペアが可能な状態を実現すること。

提案手法

• リペア時のヘルパー・ノード選択を制限することにより、$(d-k+1)\eta$ 個のノードのグループに対して最適なリペアアクセスを実現するマルチレイヤー変換技術を導入する。
• 変換を $\lceil n/(\eta t) \rceil$ 回繰り返すことで、すべての $n$ 個のノードに最適なリペアアクセスを拡張し、システム全体で完全な最適リペアアクセスを達成する。
• サブパケット化レベルを $(d-k+1)^{\lceil n / (\eta(d-k+1)) \rceil}$ として定義する。ここで $\eta = \lfloor (n-k-1)/(d-k) \rfloor$ であり、これは変換の深さと効率を制御する。
• EVENODDコードをベースにし、変換をバイナリMDSアレイコードに適応させることで、最適なリペアアクセスを達成する $\mathsf{EVENODD}_{\lceil n/(\eta t) \rceil}(n,k,\eta,t)$ コードを生成する。
• ヘルパー・ノード選択の構造を活用して、I/Oを最小限に抑えつつMDS性とリペア帯域幅の最適性を保持する。
• パrameter $\eta > 1$ の場合に、サブパケット化レベルが既知の下界 $(d-k+1)^{\lceil n/(d-k+1) \rceil}$ よりも厳密に小さいことを証明し、その改善を強調する。

実験結果

リサーチクエスチョン

• RQ1 高レートMDSコードにおける最適リペアアクセスを備えた場合、既知の理論的下界を下回るサブパケット化が可能か？
• RQ2 特定のノードのサブセットに対して最適なリペアアクセスを実現できる変換メカニズムは何か？ また、そのメカニズムは全ノードをカバーするように繰り返し適用可能か？
• RQ3 パラメータ $\eta = \lfloor (n-k-1)/(d-k) \rfloor$ は、達成可能なサブパケット化とリペア効率にどのように影響するか？
• RQ4 提案された変換は、EVENODDのようなバイナリMDSアレイコードに適応可能か？ これにより、低サブパケット化と最適なリペアアクセスが達成可能か？
• RQ5 提案コードにおけるサブパケット化、リペアアクセス効率、計算複雑性のトレードオフは何か？

主な発見

• 提案されたマルチレイヤー変換MDSコードは、任意の単一ノードについて最適なリペアアクセスを達成し、サブパケット化 $\alpha = (d-k+1)^{\lceil n / (\eta(d-k+1)) \rceil}$ を実現する。ここで $\eta = \lfloor (n-k-1)/(d-k) \rfloor$ である。
• パラメータ $\eta > 1$ の場合、サブパケット化レベルは既知の下界 $(d-k+1)^{\lceil n/(d-k+1) \rceil}$ よりも厳密に小さい。これは、効率向上における画期的な成果を示している。
• パラメータ $(n,k,d) = (14,10,11)$ の場合、提案コードは $\alpha = 8$ を達成するが、既存コードでは $128$ であり、16倍の低減が達成された。
• パラメータ $(80,71,72)$ の場合、提案コードは $\alpha = 1024$ を達成するが、既存コードでは $2^{40} \approx 1.1 \times 10^{12}$ 必要であり、10億倍を超える低減が達成された。
• 提案された $\mathsf{EVENODD}_{\lceil n/(\eta t) \rceil}$ コードは、先行研究で提示された変換EVENODDコード（$\alpha = (d-k+1)^{\lceil n/(d-k+1) \rceil}$）よりも低いサブパケット化を達成している。
• 本手法により、$w$ 個のノードについて最適なリペアアクセスが実現可能であり、サブパケット化は $\alpha = (d-k+1)^{\lceil w / (\eta(d-k+1)) \rceil}$ となる。$\eta > 1$ の場合、これは既知の下界 $\geq (d-k+1)^{\lceil w/(d-k+1) \rceil}$ よりも小さい。