[논문 리뷰] Scheduling to Minimize Age of Synchronization in Wireless Broadcast Networks with Random Updates

Haoyue Tang, Jintao Wang외 2명|arXiv (Cornell University)|2019. 07. 17.

Age of Information Optimization참고 문헌 27인용 수 5

한 줄 요약

이 논문은 무선 브로드캐스트 네트워크에서 랜덤 업데이트와 신뢰할 수 없는 전송을 고려할 때 동기화 나이(AoS)를 최소화하기 위한 스케줄링 정책을 제안한다. 문제를 마르코프 결정 과정(MDP)으로 모델링하고, 이론적 AoS 하한을 유도하며, Whittle 인덱스를 기반으로 한 히우리스틱을 개발하여 복잡도를 감소시키면서도 거의 최적의 성능를 달성한다. 이는 성공 확률이 높고 업데이트 빈도가 낮은 사용자가 스케줄링에서 우선순위를 가지게 됨을 보여준다.

ABSTRACT

In this work, a wireless broadcast network with a base station (BS) sending random time-sensitive information updates to multiple users with interference constraints is considered. The Age of Synchronization (AoS), namely the amount of time elapsed since the information stored at the network user becomes desynchronized, is adopted to measure data freshness from the perspective of network users. Compared with the more widely used metric---the Age of Information (AoI), AoS accounts for the freshness of the randomly changing content. The AoS minimization scheduling problem is formulated into a discrete time Markov decision process and the optimal solution is approximated through structural finite state policy iteration. An index based heuristic scheduling policy based on restless multi-arm bandit (RMAB) is provided to further reduce computational complexity. Simulation results show that the proposed index policy can achieve compatible performance with the MDP and close to the AoS lower bound. Moreover, theoretic analysis and simulations reveal the differences between AoS and AoI. AoI minimization scheduling policy cannot guarantee a good AoS performance.

연구 동기 및 목표

• 랜덤 업데이트 생성과 신뢰할 수 없는 전송이 동시에 존재하는 무선 네트워크에서 동기화 나이(AoS)를 최소화하는 데에 미흡한 스케줄링 전략의 격차를 해소하기 위해.
• 대역폭과 채널 제약 조건 하에서 이산 시간 마르코프 결정 과정(MDP)으로 AoS 최소화 문제를 모델링하기 위해.
• 독립 동일분포(i.i.d.) 베르누이 업데이트 프로세스를 가진 오류 발생 가능 네트워크에서 AoS 성능에 대한 이론적 하한을 도출하기 위해.
• 최적의 MDP 해를 근사하는 저복잡도 히우리스틱 스케줄링 정책을 러스티 멀티어머드 밴딧(RMAB) 기반으로 설계하기 위해.
• 최적의 스케줄링 임계값을 특성화하고, 전송 성공 확률이 높고 업데이트 빈도가 낮은 사용자가 AoS 최소화에 있어 우선순위를 가지게 됨을 보여주기 위해.

제안 방법

• 기지국과 사용자 간의 나이 차이로 정의된 상태공간을 갖는 이산 시간 MDP로 AoS 최소화 문제를 수립한다.
• 가치 함수의 구조적 분석을 통해 단조성과 하위모듈라리티를 식별하여 최적의 스위칭 유형 정책을 도출할 수 있도록 한다.
• 문제의 구조적 특성을 활용하여 유한 상태 정책 반복 기법을 적용하여 최적의 MDP 해를 근사한다.
• 각 사용자를 러스티 밴딧으로 모델링하여 Whittle 인덱스 기반 히우리스틱을 제안하며, 나이와 전송 성공 확률에 기반한 인덱스를 할당한다.
• 벨만 방정식과 비용-도달 함수의 渐近적 분석을 통해 최적의 스위칭 임계값 τ_opt에 대한 닫힌 형태의 표현식을 도출한다.
• V(τ_opt)에 대한 두 표현식을 동일시함으로써 τ_opt에 대한 이차 방정식을 수립하고, 시스템 파라미터 W, p, λ를 포함한 임계값 공식을 유도한다.

실험 결과

연구 질문

• RQ1 랜덤 업데이트와 패킷 손실이 존재하는 무선 브로드캐스트 네트워크에서 AoS 성능에 대한 이론적 하한은 무엇인가?
• RQ2 업데이트 생성과 전송 성공의 동시 랜덤성 하에서 AoS 최소화를 위한 최적 스케줄링 정책은 어떻게 행동하는가?
• RQ3 Whittle 인덱스 기반 저복잡도 히우리스틱 정책이 계산 비용을 감소시키면서도 거의 최적의 AoS 성능을 달성할 수 있는가?
• RQ4 업데이트 빈도와 전송 성공 확률과 같은 사용자 특성 중에서 AoS 최소화에 있어 스케줄링 우선순위에 가장 큰 영향을 미치는 것은 무엇인가?
• RQ5 최적의 스케줄링 임계값 τ_opt는 업데이트 확률 λ, 전송 성공 확률 p, 보상 가중치 W와 같은 시스템 파라미터에 어떻게 의존하는가?

주요 결과

• 독립 동일분포(i.i.d.) 베르누이 업데이트와 패킷 손실이 존재하는 네트워크에 대해 이론적 AoS 하한이 도출되었으며, 이는 성능 기준이 된다.
• 최적의 스케줄링 정책은 스위칭 구조를 가지며, 사용자의 나이가 임계값 τ_opt를 초과할 때만 스케줄링이 이루어지며, 이는 시스템 파라미터에 따라 달라진다.
• 제안된 Whittle 인덱스 기반 히우리스틱은 MDP 기반 최적 정책과 거의 동일한 AoS 성능을 달성하며, 이론적 하한에 매우 가까운 성능도 확보한다.
• 전송 성공 확률 p가 높고 업데이트 확률 λ가 낮은 사용자가 업데이트 시 AoS 감소에 더 기여하므로 스케줄링에서 우선순위를 가진다.
• 최적의 임계값 τ_opt는 W, p, λ의 함수로 닫힌 형태로 유도되었으며, τ_opt = floor( (5/2 - 1/p - 1/λ) + sqrt( (5/2 - 1/p - 1/λ)^2 + 2(W/p - (1-λ)/λ * (1-p)/p) + 2(1-p)/p ) ) 로 표현되며, 효율적인 구현이 가능하다.
• 시뮬레이션 결과는 인덱스 정책이 다양한 파라미터 설정에서 거의 최적의 AoS 성능을 유지함을 확인하여 분석 결과의 타당성을 검증한다.