[논문 리뷰] Self-Repairing Codes for Distributed Storage - A Projective Geometric Construction

Frédérique Oggier, Anwitaman Datta|DR-NTU (Nanyang Technological University)|2011. 05. 02.

Advanced Data Storage Technologies참고 문헌 3인용 수 9

한 줄 요약

이 논문은 사영 기하학적 구성인 스프레드를 사용하여 분산 저장을 위한 새로운 종류의 자기 복구 코드(PSRC)를 제안한다. 이전의 코드들과 달리, PSRC는 XOR 연산만을 사용하여 두 노드에서만 데이터를 재생성함으로써 효율적이고 저대역폭의 복구를 가능하게 하며, MDS 코드에 가까운 높은 데이터 복구 내성과 함께 최적의 복구 효율성을 달성하면서도 최소한의 오버헤드를 유발한다.

ABSTRACT

Self-Repairing Codes (SRC) are codes designed to suit the need of coding for distributed networked storage: they not only allow stored data to be recovered even in the presence of node failures, they also provide a repair mechanism where as little as two live nodes can be contacted to regenerate the data of a failed node. In this paper, we propose a new instance of self-repairing codes, based on constructions of spreads coming from projective geometry. We study some of their properties to demonstrate the suitability of these codes for distributed networked storage.

연구 동기 및 목표

• 복구 시 접촉하는 노드 수를 최소화하는 새로운 자기 복구 코드의 클래스를 설계하여, 단 두 개의 노드만으로도 최적의 복구 효율성을 달성한다.
• 유한 기하학에서의 사영 기하학—특히 스프레드를 활용하여, 구조적이고 확장 가능한 복구 성질을 가진 코드를 구성한다.
• 다항식 평가를 간소화하여 인코딩 및 복구의 계산 복잡도를 낮추기 위해 간단한 XOR 연산으로 대체함으로써 실용성을 향상시킨다.
• 전체 MDS 성질을 포기하더라도 MDS 코드와 유사한 높은 데이터 복구 내성을 유지한다.
• 인코딩된 블록의 조각별 재생성 기능을 제공함으로써, 재생성 코드와 자기 복구 코드의 장점을 융합한다.

제안 방법

• 유한체 위의 사영 기하학에서 스프레드를 이용하여 코드를 구성하며, 특히 PG(2B-1, 2)에서 차원 B의 부분공간을 사용하여 노드의 데이터를 정의한다.
• 각 노드가 저장하는 데이터를 F_{2^B} 위의 벡터 공간 내의 벡터로 표현하며, 각 인코딩된 블록은 α = B/k개의 조각으로 구성된다.
• 기존의 HSRC 기반 방식에서 사용하는 고비용의 다항식 평가를 피하기 위해, 인코딩과 복구에 모두 XOR 연산을 유일하게 사용한다.
• 실패한 노드를 복구하기 위해 단 두 개의 활성 노드만 접촉하고, 각 노드당 β = α/2 단위의 데이터를 다운로드함으로써 선형 조합을 통해 전체 블록을 재생성할 수 있다.
• 임의의 두 노드가 다른 여러 노드와 쌍을 이루어 손실된 블록을 재생성할 수 있도록 기하학적 구조를 활용함으로써, 높은 복구 유연성을 확보한다.
• 노드의 부분집합에 대한 전수 검색을 통해 복구 가능성을 분석하고, x개의 노드에 대한 복구 확률 ρ_x를 계산하며, 정적 내성 면에서 MDS 코드와 비교한다.

실험 결과

연구 질문

• RQ1 스프레드의 사영 기하학적 구성 방식을 활용하여, 복구에 단 두 개의 노드만을 필요로 하는 자기 복구 코드를 설계할 수 있는가?
• RQ2 인코딩과 복구에 XOR 연산만을 사용할 경우, 다항식 기반 방법에 비해 계산 효율성에 어떤 영향을 미치는가?
• RQ3 동일한 (n,k) 파rameter를 가진 이상적인 MDS 코드에 비해 PSRC의 데이터 복구 내성은 어느 정도 저하되는가?
• RQ4 PSRC에서 인코딩된 블록의 조각별 재생성이 가능해지며, 더 많은 노드를 접촉함으로써 대역폭을 줄일 수 있는가?
• RQ5 임의의 노드 장애 발생 상황에서 복구 불가능한 데이터 손실의 확률은 얼마이며, MDS 및 HSRC 코드와 비교해 볼 때 어떤가?

주요 결과

• PSRC(21,3)의 경우, 5개의 노드를 접촉할 때 복구 불가능한 데이터의 확률은 단지 0.00083에 불과하여, MDS가 아니지만 MDS에 가까운 내성 특성을 보임을 시사한다.
• 3개의 랜덤 선택된 노드에서 복구 불가능한 데이터의 확률은 0.150375로, MDS 코드보다는 뚜렷이 높지만 실용적 사용에 있어 여전히 수용 가능한 수준이다.
• PSRC는 실패한 노드를 복구하기 위해 단 두 개의 활성 노드만 접촉하면 되며, 각 실패한 노드에 대해 복수의 유효한 복구 쌍이 존재하므로 고장 내성 능력이 향상된다.
• 복구에 따른 대역폭 비용이 최소화된다: d=2일 경우, 복구당 다운로드되는 데이터는 단 4단위이며, d=3일 경우 3단위만으로도 충분하여, 둘 다 재생성 코드보다 대역폭과 노드 접촉 수에서 뛰어난 성능을 보인다.
• 코드 구조는 인코딩된 블록의 조각별 재생성을 가능하게 하며, 다양한 d 값에 따라 다양한 복구 전략을 유연하게 적용할 수 있고, 동시에 최대 (n-1)/2개의 실패가 발생하더라도 복구 오버헤드는 일정하게 유지된다.
• MDS가 아니지만 PSRC는 정적 내성 p_obj가 MDS 코드의 것과 거의 동일하여, 복구 효율성과 데이터 가용성 사이의 유리한 트레이드오프를 보여준다.