[논문 리뷰] Optimized-Cost Repair in Multi-hop Distributed Storage Systems with Network Coding

Majid Gerami, Ming Xiao외 3명|arXiv (Cornell University)|2013. 03. 25.

Advanced Data Storage Technologies참고 문헌 24인용 수 6

한 줄 요약

이 논문은 네트워크 코딩을 사용한 다중 홉 분산 스토리지 시스템을 위한 최적비용 복구 방안을 제안하며, 복구 비용 최소화 문제를 선형 프로그래밍 문제로 수식화한다. 복구 비용에 대한 기본 하한을 설정하고, 최적비용 최소저장 재생(OCMSR) 코드를 사용하여 이를 달성 가능함을 증명하며, 다양한 네트워크 구조에서 살아남는 노드 간 협업을 통해 상당한 비용 절감을 이룬다.

ABSTRACT

In distributed storage systems reliability is achieved through redundancy stored at different nodes in the network. Then a data collector can reconstruct source information even though some nodes fail. To maintain reliability, an autonomous and efficient protocol should be used to repair the failed node. The repair process causes traffic and consequently transmission cost in the network. Recent results found the optimal trafficstorage tradeoff, and proposed regenerating codes to achieve the optimality. We aim at minimizing the transmission cost in the repair process. We consider the network topology in the repair, and accordingly modify information flow graphs. Then we analyze the cut requirement and based on the results, we formulate the minimum-cost as a linear programming problem for linear costs. We show that the solution of the linear problem establishes a fundamental lower bound of the repair-cost. We also show that this bound is achievable for minimum storage regenerating, which uses the optimal-cost minimum-storage regenerating (OCMSR) code. We propose surviving node cooperation which can efficiently reduce the repair cost. Further, the field size for the construction of OCMSR codes is discussed. We show the gain of optimal-cost repair in tandem, star, grid and fully connected networks.

연구 동기 및 목표

• 다중 홉 분산 스토리지 시스템 내에서 고장 난 노드를 복구할 때 전송 비용을 최소화하기 위해.
• 네트워크 구조와 복구 프로세스를 정확한 비용 분석을 위해 수정된 정보 흐름 그래프로 모델링하기 위해.
• 네트워크 링크에 선형 비용이 적용된 선형 프로그래밍 문제로 최소 복구 비용을 수식화하기 위해.
• 첫 번째 복구 단계에서 컷세트 제약 조건을 사용하여 복구 비용에 대한 기본 하한을 설정하기 위해.
• 최적비용 최소저장 재생(OCMSR) 코드를 사용하여 이 하한이 달성 가능함을 보여주기 위해.

제안 방법

• 복구 프로세스는 네트워크 구조와 다중 홉 라우팅을 통합한 수정된 정보 흐름 그래프를 사용하여 모델링된다.
• 노드 i에서 노드 j로 전송된 프래그먼트 수를 나타내는 하위그래프 벡터 $\underline{z} = [z_{(ij)}]$ 가 있으며, $z_{(ij)}$ 는 음이 아닌 정수이다.
• 복구 비용은 $\sigma_c(\underline{z}) = \sum_{(ij)\in A} c_{(ij)} z_{(ij)}$ 로 정의되며, $c_{(ij)}$ 는 링크 $(ij)$ 에서의 프래그먼트 당 비용이다.
• 임의의 $k$ 개 노드가 원본 파일을 재구성할 수 있도록 보장하기 위해 컷세트 제약 조건이 유도되며, 이는 다각형 $\Psi = \{\underline{z} \mid \underline{L}\underline{z} \geq \underline{b}, z_{(ij)} \geq 0\}$ 를 이룬다.
• 최소 비용은 이 다각형 위에서 선형 프로그램을 풀어 구하며, 이는 복구 비용에 대한 하한을 제공한다.
• 논문은 최소저장 재생(MSR) 코드를 사용할 때 이 하한이 OCMSR 코드 구축을 통해 달성 가능함을 증명한다.

실험 결과

연구 질문

• RQ1 네트워크 코딩을 적용한 다중 홉 분산 스토리지 시스템에서 복구 비용에 대한 기본 하한은 무엇인가?
• RQ2 이 하한은 실질적으로 달성 가능한가? 어떤 코드 구축 조건에서 달성 가능한가?
• RQ3 다양한 네트워크 구조에서 살아남는 노드 간 협업은 복구 비용을 어떻게 감소시키는가?
• RQ4 OCMSR 코드를 구축하기 위해 필요한 필드 크기는 얼마인가?
• RQ5 터널, 스타, 격자, 완전 연결 네트워크 구조에서 복구 비용은 어떻게 변하는가?

주요 결과

• 복구 비용은 컷세트 제약 조건으로 정의된 다각형 위에서 선형 프로그램 문제로 수식화함으로써 최소화되며, 이는 기본 하한을 도출한다.
• 이 하한은 최적비용 최소저장 재생(OCMSR) 코드를 사용할 때 달성 가능함이 증명되었으며, 특히 $\alpha = M/k$ 일 때 유의미하다.
• 살아남는 노드 간 협업은 네트워크 내 다중 홉을 통해 효율적인 데이터 포워딩을 가능하게 하여 복구 비용을 상당히 감소시킨다.
• 제안된 OCMSR 코드는 터널, 스타, 격자, 완전 연결 네트워크 구조에서 모두 최적 복구 비용을 달성한다.
• OCMSR 코드 구축을 위한 필드 크기가 분석되었으며, 실용적 구현 가능성은 입증되었다.
• 첫 번째 복구 단계에서의 컷세트 분석은 복구 비용에 대한 날카운 하한을 제공하며, 이는 최적 해를 특성화하는 데 충분하다.