[논문 리뷰] Two Piggybacking Codes with Flexible Sub-Packetization to Achieve Lower Repair Bandwidth

Hao Shi, Zhengyi Jiang외 3명|arXiv (Cornell University)|2022. 09. 20.

Advanced Data Storage Technologies인용 수 4

한 줄 요약

이 논문은 서브패킷화 수준이 유연한 분산 스토리지 시스템에서 단일 노드 장애 시 더 낮은 복구 대역폭을 달성하는 두 가지 새로운 피그백킹 코드를 제안한다. 첫 번째 코드는 $ m $가 2에서 $ r $ 사이일 때를 지원하며, 두 번째 코드는 $ m $이 $ r $의 배수일 때 피그백킹과 변환 함수의 공동 설계를 사용하여 $ k/n = 0.75, 0.8, 0.9 $ 및 $ r \geq 4 $ 조건에서 기존 코드들 중에서 가장 낮은 복구 대역폭을 달성한다.

ABSTRACT

As a special class of array codes, $(n,k,m)$ piggybacking codes are MDS codes (i.e., any $k$ out of $n$ nodes can retrieve all data symbols) that can achieve low repair bandwidth for single-node failure with low sub-packetization $m$. In this paper, we propose two new piggybacking codes that have lower repair bandwidth than the existing piggybacking codes given the same parameters. Our first piggybacking codes can support flexible sub-packetization $m$ with $2\leq m\leq n-k$, where $n - k > 3$. We show that our first piggybacking codes have lower repair bandwidth for any single-node failure than the existing piggybacking codes when $n - k = 8,9$, $m = 6$ and $30\leq k \leq 100$. Moreover, we propose second piggybacking codes such that the sub-packetization is a multiple of the number of parity nodes (i.e., $(n-k)|m$), by jointly designing the piggyback function for data node repair and transformation function for parity node repair. We show that the proposed second piggybacking codes have lowest repair bandwidth for any single-node failure among all the existing piggybacking codes for the evaluated parameters $k/n = 0.75, 0.8, 0.9$ and $n-k\geq 4$.

연구 동기 및 목표

• 낮은 서브패킷화 수준을 가진 고성능 MDS 어레이 코드에서 복구 대역폭을 최소화하는 과제를 해결한다.
• 특히 $ 2 \leq m \leq r $ 조건에서 서브패킷화 수준 $ m $ 가 유연한 피그백킹 코드를 설계한다, 여기서 $ r = n-k $이다.
• 데이터 노드와 패리티 노드의 복구를 모두 개선하기 위해 피그백킹 함수와 변환 함수의 공동 설계를 개발한다.
• 특히 실제 서브패킷화 제약 조건 하에서 동일한 파rameter를 가진 기존 피그백킹 코드들보다 복구 대역폭에서 뛰어난 성능을 달성한다.
• 최소한의 복구 비율을 유지하면서도 MDS 성질을 유지하면서 데이터 및 패리티 노드의 효율적 복구를 가능하게 한다.

제안 방법

• 서브패킷화 수준 $ m $ 가 유연하며 $ 2 \leq m \leq r $ 를 만족하는 첫 번째 피그백킹 코드 $ \mathcal{C}_1(n,k,m,L) $ 를 제안한다, 여기서 $ r = n-k \geq 4 $이다.
• 기존 연구들이 별도로 최적화한 것과 달리, 데이터 노드와 패리티 노드 복구를 동시에 개선하는 피그백킹 함수를 설계한다.
• 패리티 노드 복구를 위한 변환 함수를 도입하여 피그백킹 함수와 함께 작용함으로써 복구 부하를 추가로 감소시킨다.
• 복구 대역폭 비율의 분석적 유도를 가능하게 하기 위해 $ L $ 이 $ k $ 의 인수인 구조적 설계를 사용한다.
• 패리티 노드의 평균 복구 대역폭을 최소화하기 위해 피그백킹 함수와 변환 함수의 공동 최적화를 적용한다.
• 평균 복구 대역폭 비율 $ \gamma^{\text{sys}} $ 와 $ \gamma^{\text{parity}} $ 의 닫힌 형태 식을 유도하며, $ k \to \infty $ 일 때의 경계 및 점근적 분석도 수행한다.

실험 결과

연구 질문

• RQ1 서브패킷화 수준 $ m $ 가 $ 2 \leq m \leq r $ 범위에서 다양하게 조절 가능한 피그백킹 코드를 어떻게 설계할 수 있으며, 복구 대역폭을 최소화할 수 있는가?
• RQ2 데이터 노드를 위한 피그백킹 함수와 패리티 노드를 위한 변환 함수를 공동으로 설계할 경우 전체 복구 대역폭에 어떤 영향을 미치는가?
• RQ3 기존 피그백킹 코드들과 비교해 볼 때, $ m < r $ 조건에서, 특히 $ r = 8,9 $ 이고 $ m = 6 $ 일 때 제안된 코드의 복구 대역폭은 어떻게 되는가?
• RQ4 두 번째 코드 클래스는 $ m $ 이 $ r $ 의 배수일 때 어떤 성능 향상을 보이는가? 특히 코드율 $ k/n = 0.75, 0.8, 0.9 $ 및 $ r \geq 4 $ 조건에서의 성능을 분석한다.
• RQ5 피그백킹 함수와 변환 함수의 공동 설계가 유사한 파rameter를 가진 기존 코드들보다 더 낮은 복구 대역폭을 달성할 수 있는가?

주요 결과

• 우리의 첫 번째 피그백킹 코드 $ \mathcal{C}_1 $ 는 $ r = 8,9 $, $ m = 6 $, 및 $ 30 \leq k \leq 100 $ 조건에서 모든 기존 피그백킹 코드보다 낮은 복구 대역폭을 달성하며, $ 2 \leq m \leq r $ 범위의 서브패킷화 수준이 탄력적이다.
• 두 번째 피그백킹 코드 $ \mathcal{C}_2 $ 는 $ k/n = 0.75, 0.8, 0.9 $ 및 $ r \geq 4 $ 조건에서, $ m $ 이 $ r $ 의 배수일 때 모든 기존 피그백킹 코드 중에서 가장 낮은 복구 대역폭을 달성한다.
• $ \mathcal{C}_1 $ 에서 평균 복구 대역폭 비율 $ \gamma^{\text{sys}} $ 는 $ k \to \infty $ 일 때 최소값 $ \gamma_{\text{min}}^{\text{sys}} $ 에 수렴하며, 이는 강력한 점근적 최적성의 징후이다.
• $ \mathcal{C}_2 $ 의 패리티 노드 복구 평균 복구 대역폭 비율은 $ \gamma_{\text{parity}} = \frac{2}{r} + \frac{1}{k} - \frac{1}{kr} - \frac{L+1}{2sr} $ 로 주어지며, 공동 함수 설계를 통해 최소화된다.
• 그림 5 및 그림 6의 비교 평가 결과, $ \mathcal{C}_1 $ 과 $ \mathcal{C}_2 $ 는 모든 평가 파rameter에서 REPB [15], $ \mathcal{C}_3 $ [20], $ \mathcal{C} $ [21], OOP [16], $ \mathcal{C}_4 $ [1], 및 $ \mathcal{C}_5 $ [19] 를 모두 초월한다.
• $ \mathcal{C}_2 $ 에서 피그백킹 함수와 변환 함수의 공동 설계는 복구 기능을 별도로 최적화한 코드들에 비해 측정 가능한 복구 대역폭 감소를 이끌어낸다.