[论文解读] Rack-aware minimum-storage regenerating codes with optimal access

Jiaojiao Wang, Zitan Chen|arXiv (Cornell University)|Apr 18, 2023

Advanced Data Storage Technologies被引用 4

一句话总结

本文提出了一类rack-aware最小存储再生（MSR）码，通过最小化单个rack内故障节点修复时访问的符号数量，实现了最优访问性能。作者推导出修复访问的紧下界，并构造出在所有允许参数下均达到该边界的码，从而在具有rack内集体处理能力的集群存储系统中实现高效修复。

ABSTRACT

We derive a lower bound on the amount of information accessed to repair failed nodes within a single rack from any number of helper racks in the rack-aware storage model that allows collective information processing in the nodes that share the same rack. Furthermore, we construct a family of rack-aware minimum-storage regenerating (MSR) codes with the property that the number of symbols accessed for repairing a single failed node attains the bound with equality for all admissible parameters. Constructions of rack-aware optimal-access MSR codes were only known for limited parameters. We also present a family of Reed-Solomon (RS) codes that only require accessing a relatively small number of symbols to repair multiple failed nodes in a single rack. In particular, for certain code parameters, the RS construction attains the bound on the access complexity with equality and thus has optimal access.

研究动机与目标

• 建立rack-aware存储系统中，单个rack内故障节点修复时所需访问符号数的理论下界。
• 设计显式构造的rack-aware MSR码，使其在所有允许参数下均实现最优访问性能。
• 将框架扩展至多故障节点修复，利用访问复杂度低的Reed-Solomon码。
• 通过建模rack内的集体数据处理，实现在真实集群存储系统中的高效修复。
• 证明所提出的码与理论访问边界完全匹配，确保最优性能。

提出的方法

• 利用信息流论证和组合优化方法，推导出在单个rack内修复单个故障节点时所需访问符号数的下界。
• 通过在有限域上利用代数结构，构造一族达到所推导下界且等号成立的rack-aware MSR码。
• 采用基于域扩张和基构造的新型编码方案，确保修复访问最小化并匹配理论极限。
• 提出一种基于Reed-Solomon码的多故障节点修复构造，最小化访问复杂度，并在特定参数条件下实现最优性。
• 证明当帮助rack数量与故障节点数量满足特定代数约束时，修复访问达到最优。
• 使用数学归纳法和有限域上的线性代数，证明构造的基元素能够张成所需的域扩张，从而确保码构造的正确性与完备性。

实验结果

研究问题

• RQ1 在rack-aware存储系统中，修复单个rack内故障节点时，理论上最少需要访问多少个符号？
• RQ2 能否构造出在所有允许参数下，其修复访问均匹配该理论下界的rack-aware MSR码？
• RQ3 如何利用rack内数据的集体处理能力来降低修复带宽和访问复杂度？
• RQ4 在何种条件下，Reed-Solomon码可实现单个rack内多故障节点修复的最优访问复杂度？
• RQ5 是否可能构造出在rack-aware模型下兼具存储高效与修复带宽最优特性的最优访问MSR码？

主要发现

• 推导出单个rack内修复单个故障节点时访问符号数的紧下界，其依赖于帮助rack数量和系统参数。
• 所提出的MSR码构造在所有允许参数下均达到该下界，证明了其在访问复杂度上的最优性。
• 对于某些参数集，基于Reed-Solomon码的多故障节点修复构造也达到理论访问边界，因此为最优。
• 该构造可在不产生通信开销的前提下实现rack内数据的集体处理，显著提升修复效率。
• 最优性证明依赖于在有限域上提出的新型基构造，表明所有必需的域元素均可由最小基集合线性生成。
• 结果表明，当数据块数量不是rack大小的倍数时，rack-aware编码相比传统同质编码可实现更小的修复带宽。