[논문 리뷰] On the Sub-Packetization Size and the Repair Bandwidth of Reed-Solomon Codes

Weiqi Li, Zhiying Wang외 1명|arXiv (Cornell University)|2018. 06. 01.

Advanced Data Storage Technologies참고 문헌 33인용 수 5

한 줄 요약

이 논문은 서브패킷화 크기와 복구 대역폭 사이의 민감한 트레이드오프를 가능하게 하기 위해, 전체 길이의 RS 코드(낮은 서브패킷화, 높은 복구 대역폭)와 MSR를 달성하는 코드(높은 서브패킷화, 최적의 복구 대역폭) 사이를 보간하는 코드 구조 및 복구 기법을 제안한다. 평가 점 집합의 크기를 조절함으로써 가변적인 복구 대역폭을 달성하여, 네트워크 트래픽을 줄이고 필드 복잡도를 관리 가능한 수준으로 유지하는 실용적인 구현을 가능하게 한다.

ABSTRACT

Reed-Solomon (RS) codes are widely used in distributed storage systems. In this paper, we study the repair bandwidth and sub-packetization size of RS codes. The repair bandwidth is defined as the amount of transmitted information from surviving nodes to a failed node. The RS code can be viewed as a polynomial over a finite field $GF(q^\ell)$ evaluated at a set of points, where $\ell$ is called the sub-packetization size. Smaller bandwidth reduces the network traffic in distributed storage, and smaller $\ell$ facilitates the implementation of RS codes with lower complexity. Recently, Guruswami and Wootters proposed a repair method for RS codes when the evaluation points are the entire finite field. While the sub-packization size can be arbitrarily small, the repair bandwidth is higher than the minimum storage regenerating (MSR) bound. Tamo, Ye and Barg achieved the MSR bound but the sub-packetization size grows faster than the exponential function of the number of the evaluation points. In this work, we present code constructions and repair schemes that extend these results to accommodate different sizes of the evaluation points. In other words, we design schemes that provide points in between. These schemes provide a flexible tradeoff between the sub-packetization size and the repair bandwidth. In addition, we generalize our schemes to manage multiple failures.

연구 동기 및 목표

• 전체 길이의 RS 코드(낮은 서브패킷화, 높은 복구 대역폭)와 MSR를 달성하는 코드(높은 서브패킷화, 최적의 복구 대역폭) 사이의 중간 해결책이 부족한 문제를 해결한다.
• 다양한 평가 점 집합을 가진 RS 코드의 기존 복구 기법을 일반화하는 통합 프레임워크를 제공한다.
• 실제 분산 스토리지 시스템에서의 실용적 구현을 가능하게 하기 위해 서브패킷화 크기와 복구 대역폭을 균형 잡는다.
• 복구 대역폭을 제한하면서도 다중 노드 장애를 지원할 수 있도록 복구 기법을 확장한다.

제안 방법

• 전체 필드가 아닌 $GF(q^\ell)$의 부분집합에서 다항식을 평가하여 $GF(q)$ 위의 벡터 코드를 구성함으로써 서브패킷화 크기 $\ell$를 설정한다.
• 부호수체 $\mathbb{B} = GF(q)$ 위에서의 선형 종속성을 유지하면서 대역폭을 최소화하는 복구 기법을 유도하기 위해 이중 부호 표현을 사용한다.
• $GF(q^\ell)$ 위에서 추적 함수와 이중 기저를 적용하여 필드 원소를 $\mathbb{B}$-선형 조합으로 분해함으로써 효율적인 복구 계산을 가능하게 한다.
• 평가 점의 선형 조합과 추적 사영을 통해 복구 계수를 정의하여 전체 랭크를 확보하고 최소 전송을 보장한다.
• 다중 오류를 처리할 수 있도록 복구 계수 설계를 확장하여 동시에 여러 개의 손실을 처리할 수 있도록 한다.
• 제안된 기법이 이중 부호 기반 복구 기법과 동치임을 증명함으로써 이론적 최적성과 정확성을 보장한다.

실험 결과

연구 질문

• RQ1 서브패킷화 크기와 복구 대역폭 사이의 민감한 트레이드오프를 제공하는 RS 코드용 복구 기법을 설계할 수 있는가?
• RQ2 필드 산술의 복잡도를 실용적으로 유지하면서 서브패킷화 크기를 유지한 채 복구 대역폭을 최소화할 수 있는가?
• RQ3 평가 점 집합의 크기를 변화시킬 경우 RS 코드에서 복구 대역폭과 서브패킷화에 어떤 영향을 미치는가?
• RQ4 제안된 기법을 다중 노드 장애를 지원하도록 일반화할 수 있는가? 이때 복구 대역폭은 제한된 수준을 유지할 수 있는가?
• RQ5 기존의 전체 길이의 RS 코드와 MSR를 달성하는 RS 코드 기법과 비교했을 때, 제안된 방법의 성능과 복잡도는 어떠한가?

주요 결과

• 제안된 기법은 전체 길이의 RS 코드와 MSR를 달성하는 코드 사이를 보간함으로써 서브패킷화 크기와 복구 대역폭 사이에 연속적인 트레이드오프를 달성한다.
• 주어진 $n$과 $k$에 대해 복구 대역폭은 도우미 노드 수에 비례하여 선형적으로 증가하며, 평가 점 집합이 철저히 선택될 경우 최소화된다.
• 서브패킷화 크기 $\ell$는 필드 크기와 독립적으로 조정 가능하므로, 실용적인 구현에서 필드 산술 복잡도를 관리 가능한 수준으로 유지할 수 있다.
• 일부 구성에서 복구 기법은 최적의 복구 대역폭을 달성하며, $\ell \approx n^n$일 경우 MSR 경계에 도달한다. 이는 이전의 구조보다 낮은 복잡도를 유지한다.
• 기법은 다중 장애로 일반화되었으며, 알려진 다중 오류 MSR 코드 수준의 대역폭 효율성을 달성한다.
• 이론적 분석을 통해 복구 기법이 이중 부호 기반 기법과 동치임을 확인하였으며, 성공적인 복구를 위한 정확성과 전체 랭크 조건을 보장한다.