[논문 리뷰] Rack-Aware Regenerating Codes with Fewer Helper Racks

Zhifang Zhang, Liyang Zhou|arXiv (Cornell University)|2021. 01. 21.

Advanced Data Storage Technologies참고 문헌 13인용 수 6

한 줄 요약

이 논문은 분산 스토리지 시스템에서 저장 오버헤드와 크로스랙 복구 대역폭 사이의 새로운 트레이드오프를 제안하며, 특히 복구도수 $\bar{d} < \bar{k}$ 인 영역에서 더 낮은 서브패키터라이제이션과 향상된 효율성을 달성한다. 이는 MSRR 및 MBRR 코드의 명시적 구성 방식을 제시하며, 복원 코드와 국소적으로 복구 가능한 코드의 이점을 결합하여 작은 유한체에서 실용적인 파rameter로 작동한다.

ABSTRACT

We consider the rack-aware storage system where \(n\) nodes are organized in \(\bar{n}\) racks each containing \(u\) nodes, and any \(k\) nodes can retrieve the stored file. Moreover, any single node erasure can be recovered by downloading data from \(\bar{d}\) helper racks as well as the remaining \(u\!-\!1\) nodes in the same rack. Previous work mostly focuses on minimizing the cross-rack repair bandwidth under the condition \(\bar{d}\geq \bar{k}\), where \(\bar{k}=\lfloor\frac{k}{u} floor\). However, \(\bar{d}\geq \bar{k}\) is not an intrinsic condition for the rack-aware storage model. In this paper, we establish a tradeoff between the storage overhead and cross-rack repair bandwidth for the particularly interesting case \(\bar{d}\!

연구 동기 및 목표

• 레일크-aware 스토리지 시스템에서 $\bar{d} < \bar{k}$ 인 경우에 저장 오버헤드와 크로스랙 복구 대역폭 사이의 새로운 트레이드오프를 수립하는 것. 이는 이전 연구에서 제약을 받지 않는 영역이다.
• $\bar{d} < \bar{k}$ 영역에서 고도의 서브패키터라이제이션을 피하면서 효율적으로 작동하는 명시적 MSRR 및 MBRR 코드를 설계하는 것.
• 내부 레일크 복구를 활용하고 크로스랙 보조 레이크 선택을 최적화하여 복구 대역폭을 최소화하면서 복구도수를 줄이는 것.
• 레일크-aware 코드에서 $\bar{d} < \bar{k}$ 조건을 만족할 경우 저저장 오버헤드와 실용적인 필드 크기를 달성할 수 있음을 입증하는 것. 이는 실세계 구현에 적합하다.

제안 방법

• 모든 파라미터 $n = \bar{n}u$, $k = \bar{k}u + u_0$ 에 대해 적용 가능한 컷셋 바운드를 유도하여 저장 및 크로스랙 대역폭 제약 조건 하에서 파일 크기의 이론적 한계를 설정한다.
• 스칼라 코드 구성을 제안하며, 제품-매트릭스 유사한 구조를 사용한다. 각 레일크의 데이터는 유한체 위에서 $(\bar{n}, \bar{d}, \bar{d})$ MBR 코드로 인코딩된다.
• 대칭 행렬 $S$ 와 바르드모인드 유사 구조를 사용하여 보조 레일크 계수를 생성함으로써, 고장 난 노드를 $\bar{d}$ 개의 보조 레일크와 $u-1$ 개의 내부 레일크 노드로부터 복구할 수 있도록 한다.
• 파unction된 레일크 코드 $C_e$ 의 선형 조합을 사용하여 고장 난 노드를 재구성함으로써, $\bar{d} < \bar{k}$ 조건 하에서 복구의 가능성을 보장한다.
• 명시적 매개변수화를 통해 MSRR 및 MBRR 코드를 구성하며, MBRR의 경우 $\beta = 1$, MSRR의 경우 최적화된 $\alpha$ 를 사용하여 최소 저장 또는 최소 대역폭을 달성한다.
• 예를 들어 $n$ 과 유사한 크기의 유한체, 예를 들어 $\mathrm{GF}(2^8)$ 를 사용하여 작동함으로써, 낮은 서브패키터라이제이션을 갖는 실용적 구현을 가능하게 한다.

Fig. 1 : An example of the information flow graph used to prove the cut-set bound, where $(n,k,u,\bar{d})=(6,4,2,1)$ .

실험 결과

연구 질문

• RQ1 레일크-aware 스토리지 시스템에서 $\bar{d} < \bar{k}$ 조건이 성립할 경우, 저장 오버헤드와 크로스랙 복구 대역폭 사이에 의미 있는 트레이드오프를 설정할 수 있는가?
• RQ2 $\bar{d} < \bar{k}$ 영역에서 저서브패키터라이제이션과 작은 필드 크기를 갖는 명시적 MSRR 및 MBRR 코드의 구성이 가능한가?
• RQ3 복구도수 $\bar{d}$ 는 레일크-aware 시스템에서 저장 효율성과 크로스랙 통신 비용의 균형에 어떻게 영향을 미치는가?
• RQ4 제안된 코드는 저장 오버헤드와 복구도수 측면에서 기존의 MSR/MBR 및 LRC 코드를 초월할 수 있는가?

주요 결과

• 제안된 MSRR 코드는 $\bar{d} = 4$, $\bar{n} = 10$, $u = 5$, $n-k=6$ 조건에서 약 1.25의 저장 오버헤드를 달성하며, $\bar{d} = 0$ 인 경우에 비해 상당히 낮은 오버헤드를 보인다.
• $\bar{n} = 10$ 인 경우, MSRR 코드의 저장 오버헤드는 $\bar{d} = 0$ 시 1.389 에서 $\bar{d} = 8$ 시 1.136로 감소하여 약 18.2% 감소하였다.
• MBRR 코드는 모든 테스트된 $\bar{d}$ 값에서 크로스랙 복구 대역폭 오버헤드가 1을 유지하여 일관된 대역폭 효율성을 보였다.
• 동일한 파라미터 하에서 MBRR 코드의 저장 오버헤드는 $\bar{d} = 0$ 에서 $\bar{d} = 8$ 로 이동함에 따라 11.1% 감소하였으며, 중간 수준의 $\bar{d}$ 에서 효율성이 향상됨을 시사한다.
• 코드는 $\mathrm{GF}(2^8)$ 에 기반하여 구성되었으며, 이는 이전의 MSR 코드에서의 지수 수준의 서브패키터라이제이션과는 달리 실용적 구현이 가능하게 한다.
• $\bar{d} < \bar{k}$ 영역이 실현 가능하고 유용함이 입증되었으며, $\bar{d} \geq \bar{k}$ 구조에서의 고도의 복구도수와 지수 수준의 서브패키터라이제이션을 피할 수 있다.