[논문 리뷰] Algorithms for Constructing Overlay Networks For Live Streaming

Konstantin Andreev, Bruce M. Maggs외 3명|arXiv (Cornell University)|2011. 09. 19.

Peer-to-Peer Network Technologies참고 문헌 45인용 수 15

한 줄 요약

이 논문은 실시간 스트리밍을 위한 저비용, 고신뢰성 오버레이 멀티캐스트 네트워크를 구축하기 위한 다항식 시간 근사 알고리즘을 제시한다. 네트워크 손실률이 사전에 알려진 삼단계 아키텍처(원천, 반사기, 수신기)를 모델링하며, 용량과 신뢰성에 대해 최적해에 대한 상수 배수 이내의 성능을 보장하고, 비용에 대해서는 2배 이내로 근사함으로써 대규모 네트워크로의 효율적 확장이 가능하다.

ABSTRACT

We present a polynomial time approximation algorithm for constructing an overlay multicast network for streaming live media events over the Internet. The class of overlay networks constructed by our algorithm include networks used by Akamai Technologies to deliver live media events to a global audience with high fidelity. We construct networks consisting of three stages of nodes. The nodes in the first stage are the entry points that act as sources for the live streams. Each source forwards each of its streams to one or more nodes in the second stage that are called reflectors. A reflector can split an incoming stream into multiple identical outgoing streams, which are then sent on to nodes in the third and final stage that act as sinks and are located in edge networks near end-users. As the packets in a stream travel from one stage to the next, some of them may be lost. A sink combines the packets from multiple instances of the same stream (by reordering packets and discarding duplicates) to form a single instance of the stream with minimal loss. Our primary contribution is an algorithm that constructs an overlay network that provably satisfies capacity and reliability constraints to within a constant factor of optimal, and minimizes cost to within a logarithmic factor of optimal. Further in the common case where only the transmission costs are minimized, we show that our algorithm produces a solution that has cost within a factor of 2 of optimal. We also implement our algorithm and evaluate it on realistic traces derived from Akamai's live streaming network. Our empirical results show that our algorithm can be used to efficiently construct large-scale overlay networks in practice with near-optimal cost.

연구 동기 및 목표

• 손실이 발생하는 인터넷 경로를 통해 스케일링 가능하고, 고신뢰성이며 저비용인 오버레이 네트워크를 구축하는 데 도전 과제를 해결한다.
• 오버레이 네트워크 구축 문제를 용량, 신뢰성, 비용 목표를 갖는 제약 조건이 있는 최적화 문제로 수식화한다.
• 대규모 네트워크에 스케일링 가능하고 실시간 스트리밍에서 흔한 동적 네트워크 조건을 처리할 수 있는 효율적인 근사 알고리즘을 설계한다.
• 손실률과 네트워크 토폴로지가 변할 경우에도 최적해 대비 해의 품질에 이론적 보장을 확보한다.
• 알고리즘의 실용 가능성과 성능을 애카마이의 생산 실시간 스트리밍 인fra에서 유래한 실제 트레이스를 기반으로 검증한다.

제안 방법

• 오버레이 네트워크를 세 단계 시스템으로 모델링한다: 원천(입구 지점), 반사기(스트림을 복제하는 중간 노드), 수신기(최종 사용자 근처의 에지 노드).
• 노드 쌍 간의 독립적인 패킷 손실률을 사전에 알고 있다고 가정하고, 신뢰성 제약 조건을 갖는 플로우 문제로 스트림 전달를 모델링한다.
• 문제를 혼합정수선형계획문제(MILP)로 수식화하고, 효율적으로 해결하기 위해 다항식 시간 근사 알고리즘(Approx)을 설계한다.
• 비용 최소화를 우선시하면서도 신뢰성 및 용량 제약 조건을 만족하는 그레디티, 계층적 구성 접근 방식을 사용한다.
• 실제 애카마이의 실시간 스트리밍 네트워크에서 유래한 실제 트레이스를 기반으로 알고리즘을 구현하고 평가하며, 정확한 솔버(IP)와 변형된 버전(Approxhack)과 비교한다.
• 하이브리드 전략 도입: 저손실 상황에서는 정확한 솔버를, 고손실 또는 대규모 케이스에서는 Approx 알고리즘을 사용한다.

실험 결과

연구 질문

• RQ1 실시간 스트리밍을 위한 오버레이 멀티캐스트 네트워크를 구성하는 데 있어, 용량과 신뢰성 제약 조건을 증명 가능하게 충족시키는 다항식 시간 알고리즘을 설계할 수 있는가?
• RQ2 특히 고패킷 손실 조건에서 비용 측면에서 최적해에 얼마나 가까이 도달할 수 있는가?
• RQ3 대규모 네트워크 토폴로지로 확장할 경우, 해의 품질과 런타임 성능 사이의 상호 교환 관계는 어떠한가?
• RQ4 실제 생산 시스템에서 유래한 대규모 네트워크 트레이스에서 알고리즘이 거의 최적의 성능을 유지할 수 있는가?
• RQ5 손실률 및 네트워크 크기에 따라 네트워크 조건에 맞게 정확한 방법과 근사 방법을 조합하는 실용적인 하이브리드 전략이 존재하는가?

주요 결과

• 제안된 Approx 알고리즘은 전송 비용만 최소화하는 일반적인 경우에 최적해의 비용의 2배 이내로 오버레이 네트워크를 구성한다.
• 고손실률 네트워크에서는 Approx가 정확한 솔버(IP)와 개선된 변형(Approxhack)을 모두 능가하며, $42\times44\times100$ 네트워크를 3시간 13분 내에 해결한 반면, IP는 18시간 이내로 완료하지 못했다.
• IP나 Approxhack가 처리할 수 없었던 대규모 네트워크(예: $50\times44\times80$)에 대해서도 Approx가 스케일링 가능하여 실세계 배포에 대한 실용성을 입증했다.
• 저손실 상황에서는 정확한 솔버(IP)가 실현 가능하며 Approx보다 더 우수한 해를 생성했기 때문에, 하이브리드 전략이 타당하다는 것이 확인되었다.
• 동적이고 손실이 많은 인터넷 환경에서도 Approx는 신뢰성 및 용량 제약 조건을 최적해에 대해 상수 배수 이내로 유지한다.
• 실험 결과는 Approx가 훨씬 감소된 런타임으로 거의 최적의 비용을 제공함으로써, 대규모 또는 고손실 환경에서 유일한 실용적 옵션이 됨을 확인했다.