[论文解读] Rack-Aware Cooperative Regenerating Codes

Shreya Gupta, V. Lalitha|arXiv (Cornell University)|Feb 24, 2021

Advanced Data Storage Technologies参考文献 11被引用 7

一句话总结

本文提出了一种适用于跨机架均匀分布多节点故障的机架感知协作再生码，用于分布式存储系统。它刻画了存储-修复带宽权衡关系，推导出最小存储（MSRR）和最小带宽（MBRR）点，并为所有系统参数提供了最小带宽机架感知协作再生码的显式构造，利用MDS编码和向量-MDS特性实现高效修复并最小化跨机架带宽。

ABSTRACT

In distributed storage systems, cooperative regenerating codes tradeoff storage for repair bandwidth in the case of multiple node failures. In rack-aware distributed storage systems, there is no cost associated with transferring symbols within a rack. Hence, the repair bandwidth will only take into account cross-rack transfer. Rack-aware regenerating codes for the case of single node failures have been studied and their repair bandwidth tradeoff characterized. In this paper, we consider the framework of rack-aware cooperative regenerating codes for the case of multiple node failures where the node failures are uniformly distributed among a certain number of racks. We characterize the storage repair-bandwidth tradeoff as well as derive the minimum storage and minimum repair bandwidth points of the tradeoff. We also provide constructions of minimum bandwidth rack-aware cooperative regenerating codes for all parameters.

研究动机与目标

• 为解决在多个节点故障均匀分布在不同机架的分布式存储系统中最小化修复带宽的挑战。
• 将机架感知再生码扩展至涉及多个同时故障的协作修复场景。
• 刻画在机架感知协作修复约束下的存储-修复带宽权衡关系。
• 推导出该权衡曲线上的理论最小存储（MSRR）和最小带宽（MBRR）点。
• 为所有系统参数构造可实现MBRR点的显式最小带宽机架感知协作再生码。

提出的方法

• 使用参数 (n,k,d,r,e,f,α,β₁,β₂) 建模系统，其中节点被划分为 r 个机架，每机架含 n/r 个节点，且 e 个故障均匀分布在 f 个机架中。
• 以 MBCR（最小带宽协作再生）码作为构建模块，通过特定块结构构造消息矩阵 Mi，以支持高效修复。
• 利用矩阵 U 和 V 的线性组合对全局编码符号进行操作，其中 U 和 V 包含满秩子矩阵，以确保可修复性和数据恢复。
• 引入局部校验矩阵 Pi,l 以满足向量-MDS性质，从而利用可用的全局符号和校验符号恢复故障节点。
• 仅使用跨机架通信，其中辅助机架每机架传输 β₁ = 2e/f 个符号，以最小化总跨机架带宽。
• 通过在足够大的域上使用满秩编码矩阵，确保任意 k 个节点（无论来自最后 (n/r - e/f) 个节点或其混合）均可重构完整文件。

实验结果

研究问题

• RQ1 当多个节点故障在机架间均匀分布时，机架感知协作再生码的存储-修复带宽权衡关系是什么？
• RQ2 该权衡曲线上的理论最小存储（MSRR）和最小带宽（MBRR）点分别是什么？
• RQ3 能否为所有系统参数实现最小带宽机架感知协作再生码的显式构造？
• RQ4 如何利用向量-MDS性质在局部校验约束下确保可修复性？
• RQ5 结构化矩阵 U 和 V 在实现最小带宽下高效跨机架修复中起到什么作用？

主要发现

• 在均匀分布多机架节点故障条件下，对机架感知协作再生码的存储-修复带宽权衡关系进行了刻画，扩展了先前的单故障和非协作模型。
• MSRR 点在 (α_MSRR, γ_MSRR) = (B/k, Bd/(k(d−m+1))) 处实现，最小化每个节点的存储量。
• MBRR 点在 (α_MBRR, γ_MBRR) = (Bd / ((k−m)d + m(d−(m−1)/2)), Bd / ((k−m)d + m(d−(m−1)/2))) 处实现，最小化跨机架修复带宽。
• 为所有参数提供了最小带宽机架感知协作再生码的显式构造，利用 MBCR 码和向量-MDS 局部校验。
• 修复过程分两轮进行：第一轮，辅助机架每机架传输 2e/f 个符号；第二轮，故障机架交换符号以重建全部丢失数据，确保完全恢复。
• 由于满秩编码矩阵的性质，任意 k 个节点子集均可保证实现数据收集，该性质在足够大的域上已验证。