[论文解读] Scheduling Algorithms for Minimizing Age of Information in Wireless Broadcast Networks with Random Arrivals: The No-Buffer Case

Yu-Pin Hsu, Eytan Modiano+1 more|arXiv (Cornell University)|Dec 20, 2017

Age of Information Optimization参考文献 22被引用 30

一句话总结

本文提出了一种调度算法，以最小化无线广播网络中随机到达且基站无缓存情况下的信息年龄（AoI）。该文引入了一种基于索引的调度算法，在到达率相等时为年龄最优；并通过马尔可夫决策过程（MDP）和Whittle索引方法证明，离线与在线算法在渐近意义上均能最小化平均AoI，其中索引策略具有低复杂度且在仿真中表现出色。

ABSTRACT

Age of information is a new network performance metric that captures the freshness of information at end-users. This paper studies the age of information from a scheduling perspective. To that end, we consider a wireless broadcast network where a base-station (BS) is updating many users on random information arrivals under a transmission capacity constraint. For the offline case when the arrival statistics are known to the BS, we develop a structural MDP scheduling algorithm and an index scheduling algorithm, leveraging Markov decision process (MDP) techniques and the Whittle's methodology for restless bandits. By exploring optimal structural results, we not only reduce the computational complexity of the MDP-based algorithm, but also simplify deriving a closed form of the Whittle index. Moreover, for the online case, we develop an MDP-based online scheduling algorithm and an index-based online scheduling algorithm. Both the structural MDP scheduling algorithm and the MDP-based online scheduling algorithm asymptotically minimize the average age, while the index scheduling algorithm minimizes the average age when the information arrival rates for all users are the same. Finally, the algorithms are validated via extensive numerical studies.

研究动机与目标

• 设计调度算法以最小化无线广播网络中随机信息到达情况下的平均信息年龄。
• 解决在传输容量约束下且基站无缓存情况下的调度挑战。
• 开发离线与在线算法，使其在渐近意义上为年龄最优，利用马尔可夫决策过程（MDP）与Whittle索引理论。
• 通过大量仿真评估这些算法的性能，并与有缓存方案进行比较。
• 探究在该类网络中，基站处的缓存是否显著提升信息年龄性能。

提出的方法

• 将调度问题建模为无限状态空间且无界成本的马尔可夫决策过程（MDP），以最小化长期平均年龄。
• 通过利用最优结构特性，提出一种结构化MDP调度算法，以降低计算复杂度。
• 应用Whittle的索引方法于非休息性多臂赌博机问题，推导出闭式Whittle索引，从而简化基于索引的调度策略。
• 提出MDP与基于索引的算法的在线版本，无需事先掌握到达统计信息。
• 在分析含缓存网络时，重新设计MDP状态空间以包含缓存状态，并重新定义成本函数以反映年龄演化。
• 使用截断MDP近似与仿真研究验证性能，并比较有缓存与无缓存网络的性能。

实验结果

研究问题

• RQ1 当各用户的信息到达率相等时，低复杂度的基于索引的调度算法能否实现年龄最优？
• RQ2 在缺乏到达统计信息先验知识的情况下，离线与在线MDP调度算法在最小化平均年龄方面的表现如何？
• RQ3 在无缓存网络设置下，引入基站缓存对年龄性能有何影响？
• RQ4 在何种条件下，基站缓存能显著提升年龄性能？
• RQ5 MDP中的结构化结果能否被用于简化年龄最小化问题中Whittle索引的计算？

主要发现

• 当所有用户具有相同的信息到达率时，基于索引的调度算法可实现年龄最优，提供一种简单而有效的解决方案。
• 即使在缺乏到达统计信息先验知识的情况下，结构化MDP与基于MDP的在线调度算法仍为渐近年龄最优。
• 基于索引的在线调度算法性能几乎与最优MDP算法相当，且由于其低复杂度，推荐用于实际部署。
• 在基站引入缓存仅带来微小改善——在高到达率下平均年龄减少约5%，表明无缓存网络已接近最优性能。
• 当两个用户的到达率均较高或均较低时，缓存带来的性能增益减弱，仅在其中一个用户到达率显著较低时最为明显。
• 为MDP推导出的结构化结果显著降低了计算复杂度，并促进了Whittle索引的闭式推导。