[論文レビュー] QoE-Oriented Resource Allocation for 360-degree Video Transmission over Heterogeneous Networks

Wei Huang, Lianghui Ding+4 more|arXiv (Cornell University)|Mar 21, 2018

Image and Video Quality Assessment参考文献 31被引用数 5

ひとこと要約

本稿では、不均一なLTE/Wi-Fiネットワークにおける360度VRビデオストリーミングのためのアプリケーション層リソース割り当て方式を提案する。ユーザーがWi-Fiアクセスポイント（AP）に接続すること、視線の焦点（FoV）予測に基づくタイル単位のレート割り当て、およびQoEを向上させるための階層的バッファ戦略を統合的に最適化する。ヒューリスティック最適化により低複雑性で高いシステム効用を達成し、動的ネットワーク環境下でベンチマークを上回る性能を発揮する。

ABSTRACT

Immersive media streaming, especially virtual reality (VR)/360-degree video streaming which is very bandwidth demanding, has become more and more popular due to the rapid growth of the multimedia and networking deployments. To better explore the usage of resource and achieve better quality of experience (QoE) perceived by users, this paper develops an application-layer scheme to jointly exploit the available bandwidth from the LTE and Wi-Fi networks in 360-degree video streaming. This newly proposed scheme and the corresponding solution algorithms utilize the saliency of video, prediction of users' view and the status information of users to obtain an optimal association of the users with different Wi-Fi access points (APs) for maximizing the system's utility. Besides, a novel buffer strategy is proposed to mitigate the influence of short-time prediction problem for transmitting 360-degree videos in time-varying networks. The promising performance and low complexity of the proposed scheme and algorithms are validated in simulations with various 360-degree videos.

研究の動機と目的

• 360°/VRビデオストリーミングにおける高い帯域幅要件に応えるために、LTEおよびWi-Fiネットワーク全体におけるリソース使用を最適化すること。
• ユーザーのWi-Fiアクセスポイント（AP）への接続と、視認性および予測された視野（FoV）に基づくタイル単位のレート割り当てを統合的に管理し、QoEを向上させること。
• 短時間のチャネル変動およびFoV駆動型360度ビデオ伝送における予測誤差の影響を、新規のバッファ管理戦略により軽減すること。
• マルチユーザー、マルチRAT環境におけるNPハードな混合整数最適化問題を低複雑性で解くためのヒューリスティックアルゴリズムの開発

提案手法

• システムは、360度ビデオの注目度の高い領域を優先的に高品質で伝送するために、注目度マップを用いる。
• 視野（FoV）予測を用いて、ユーザーが現在注視しているタイルを特定し、ターゲットにされた高レート伝送を可能にする。
• 共同最適化フレームワークにより、ユーザーを最適なWi-Fi APに割り当て、LTEおよびWi-Fiの帯域幅をタイル単位で割り当て、システム効用を最大化する。
• 階層的バッファ更新戦略により、現在のチャネル状態および予測精度に応じてバッファの内容を動的に調整し、再バッファリングのリスクと品質損失の両者をバランスさせる。
• NPハードな混合整数問題を低計算複雑性で解くためのヒューリスティックサーチアルゴリズムを提案する。
• タイルベースの動画表現とQoEに配慮したレート割り当てを統合し、視覚的に注目度の高いおよび視認可能なタイルを優先する。

実験結果

リサーチクエスチョン

• RQ1 複数ユーザー、複数Wi-Fi AP、複数タイルを含む環境下で、360度ビデオストリーミングにおけるQoEを最大化するために、リソース割り当てをどのように統合的に最適化できるか？
• RQ2 注目度と予測されたFoVが、360度ビデオタイルの最適レート割り当てに与える影響は何か？
• RQ3 時間変動するネットワーク状態下で再バッファリングを低減し、高い品質を維持するためのバッファ管理はどのように設計できるか？
• RQ4 FoV駆動型360度ビデオ伝送において、バッファサイズ、予測精度、およびQoEの間にはどのようなトレードオフが存在するか？

主な発見

• 提案された階層的バッファ更新戦略は、短時間バッファ戦略や長時間バッファ戦略よりも再バッファリングと品質損失のバランスに優れており、平均的な効用が高くなる。
• 特にチャネル状態が変動する時間変動するネットワーク環境下で、ベンチマーク手法と比較してシステム効用が顕著に向上する。
• 注目度の高い領域（例：ゾウ）を視聴するユーザーは、わずかなレート差にもかかわらず、より高いレートを受け取り、これは知覚的重みに合致し、QoEの向上に寄与する。
• ヒューリスティックアルゴリズムは、全探索に比べて著しく低い計算複雑性で近似的最適性能を達成でき、リアルタイム展開に実用的である。
• FoVサイズが変動しても、予測されたFoV内および注目度の高いタイルにのみ高いレートを割り当てることで、無駄な帯域幅の浪費を効果的に削減する。
• シミュレーション結果は、多様な視聴行動およびネットワーク状態を有する複数ユーザーにおいて、提案手法が高いQoEを維持できることを示している。