[논문 리뷰] Asymptotically optimal delay-aware scheduling in wireless networks

Saad Kriouile, Maialen Larrañaga외 1명|arXiv (Cornell University)|2018. 07. 01.

Advanced Bandit Algorithms Research참고 문헌 14인용 수 4

한 줄 요약

이 논문은 대기열 인지 채널 할당을 갖는 무선 네트워크를 위한 인덱스 기반 휴리스틱 스케줄링 정책을 제안하며, 러스터드 밴딧 문제를 해결하기 위해 윌틀의 인덱스 접근법을 사용한다. 큰 사용자 수의 근사 최적성과 뛰어난 수치 성능을 입증한다.

ABSTRACT

In this paper, we investigate a channel allocation problem in networks taking into account the queues of users. Typically, there are less available channels than users, and at each slot the channels are allocated to users in such a way to minimize the total average queues in the network. We show that the problem falls in the framework of Restless Bandit Problems (RBP), for which obtaining the optimal solution is out of reach. This problem is analyzed in this paper using Whittle index approach. First, using the Lagrangian relaxation method, we provide a relaxed problem and show that it can be decomposed into simpler one-dimensional subproblems for which the optimal solution is a threshold-based policy. This allows us to characterize Whittle's indices for these one-dimensional systems and to develop an index-based heuristic policy for the original scheduling problem. We prove that this heuristic is asymptotically optimal in the infinitely many users regime and provide numerical results that illustrate its remarkably good performance.

연구 동기 및 목표

• 제한된 채널과 동적 대기열 백로그를 가진 무선 네트워크에서 사용자를 스케줄링하는 문제에 대응한다.
• 채널 할당 문제를 계산적으로 해결하기 어려운 러스터드 밴딧 문제(RBP)로 공식화한다.
• 라그랑주 승수를 활용한 타당한 근사화를 통해 문제를 일차원 하위문제로 분해한다.
• 개별 사용자 대기열에 대한 윌틀 인덱스를 특성화하여 인덱스 기반 스케줄링을 가능하게 한다.
• 사용자 수가 무한히 증가할 때 증명 가능한 점근 최적성 확보를 위한 휴리스틱 정책을 설계한다.

제안 방법

• 원래의 제약 조건이 있는 RBP 문제를 분해가 가능한 형태의 완화된 문제로 변환하기 위해 라그랑주 승수를 적용한다.
• 완화된 문제를 각 사용자 대기열의 독립적인 일차원 마르코프 결정 과정(MDP)으로 분해한다.
• 각 일차원 MDP에 대해 임계값 기반 최적 정책을 유도하여 윌틀 인덱스의 해석적 특성화를 가능하게 한다.
• 계산된 윌틀 인덱스를 기반으로 휴리스틱 스케줄링 정책을 구성하며, 더 높은 인덱스를 가진 사용자를 우선순위로 배정한다.
• 현재 대기열 상태와 인덱스 값을 기반으로 각 타임슬롯에서 채널을 할당하기 위해 인덱스 정책을 사용한다.
• 독립 동일분포(i.i.d.) 채널 상태를 가정할 때, 사용자 수가 무한히 증가하는 극한에서 인덱스 정책의 점근 최적성을 증명한다.

실험 결과

연구 질문

• RQ1 제한된 자원 하에서 대기열 인지 채널 할당을 갖는 무선 네트워크에 대해 해석 가능한 스케줄링 정책을 설계할 수 있는가?
• RQ2 스케줄링 문제의 해결이 불가능한 러스터드 밴딧 공식화는 어떻게 완화하고 분해되어 실용적인 해법을 도출할 수 있는가?
• RQ3 완화된 일차원 하위문제에 대한 최적 정책의 구조는 무엇이며, 이를 바탕으로 의미 있는 인덱스를 정의할 수 있는가?
• RQ4 인덱스 기반 휴리스틱 정책은 큰 사용자 수의 근사에서 점근 최적성을 달성하는가?
• RQ5 실제 적용에서 제안된 인덱스 정책의 성능는 다른 휴리스틱 정책과 비교해 어떻게 되는가?

주요 결과

• 완화된 문제는 각각 독립적인 일차원 MDP로 분해되며, 각각은 임계값 기반 최적 정책을 갖는다.
• 일차원 시스템에 대해 윌틀 인덱스가 해석적으로 특성화되어 인덱스 기반 스케줄링이 가능하다.
• 제안된 인덱스 기반 휴리스틱 정책은 사용자 수가 무한히 증가할 때 점근 최적임을 증명하였다.
• 수치 결과는 유한 사용자 시나리오에서도 휴리스틱 정책이 놀라운 성능을 보이며 기준 정책을 능가함을 보여준다.
• 이 방법은 고전적으로 어려운 대기열 인지 무선 네트워크에서의 스케줄링 문제에 대해 확장 가능하고 실용적인 해결책을 제공한다.