[論文レビュー] Real-Time Rate-Distortion Optimized Streaming of Wireless Video

Ahmed Abdelhadi, Andreas Gerstlauer+1 more|arXiv (Cornell University)|Jun 7, 2014

Video Coding and Compression Technologies参考文献 9被引用数 3

ひとこと要約

本稿では、移動型サイバーフィジカルシステムである自律型航空機（AAV）ネットワークを介した無線動画伝送のための低複雑性でリアルタイムな率歪み最適化（RDO）ストリーミングアルゴリズムを提案する。率歪みのトレードオフに基づき、動画エンコードと伝送を統合最適化することで、非最適化手法に比べて時間的動画品質と信頼性が著しく向上し、シミュレーションおよびHorusを用いた実世界のAAV実験でも優れた性能を示した。

ABSTRACT

Mobile cyberphysical systems have received considerable attention over the last decade, as communication, computing and control come together on a common platform. Understanding the complex interactions that govern the behavior of large complex cyberphysical systems is not an easy task. The goal of this paper is to address this challenge in the particular context of multimedia delivery over an autonomous aerial vehicle (AAV) network. Bandwidth requirements and stringent delay constraints of real-time video streaming, paired with limitations on computational complexity and power consumptions imposed by the underlying implementation platform, make cross-layer and cross-domain co-design approaches a necessity. In this paper, we propose a novel, low-complexity rate-distortion optimized (RDO) algorithms specifically targeted at video streaming over mobile embedded networks. We test the performance of our RDO algorithms using a network of AAVs both in simulation and implementation.

研究の動機と目的

• 制限された帯域幅と計算リソースを有するモバイルサイバーフィジカルシステムにおける信頼性が高く低遅延の動画ストリーミングを実現する挑戦に取り組む。
• 動的で変化しやすいAAVネットワークにおけるリアルタイム動画配信を実現するためのクロスレイヤーかつクロスドメインの共同設計アプローチを設計する。
• 厳密な電力制限と処理制限を受ける埋め込み無線プラットフォームに特化した低複雑性率歪み最適化（RDO）アルゴリズムを開発する。
• Horus AAV実験台を用いて、シミュレーションと実世界での実装の両方で提案されたRDOアルゴリズムを評価する。
• 時間的および空間的歪み指標を用いて、異なる動画コーデックと伝送戦略の間で性能を比較する。

提案手法

• リアルタイムで動画品質と伝送効率のバランスをとる低複雑性率歪み最適化（LCRDO）フレームワークを設計する。
• MJPEG/SMOKE、MPEG2、H.264などの動画コーデックとRDOを統合し、チャネル状態とバッファ状態に応じたエンコードを適応的に制御する。
• 歪み指標と時間的依存性に基づき、フレームの優先順位を動的に制御する適応的伝送戦略を実装する。
• 受信動画ストリームの時間的および空間的歪みを定量化するために、オプティカルフローとSSIM（構造的類似性インデックス）を用いる。
• 実世界のHorus実験台での検証の前に、動的AAV移動性およびチャネルモデルを用いたシミュレーションを実施する。
• フィードバックメカニズムを適用し、実飛行実験においてユニキャストおよび複数ユニキャストトポロジーの両方で性能を評価する。

実験結果

リサーチクエスチョン

• RQ1 制限された計算リソースと帯域幅を有するモバイル埋め込みネットワークにおいて、率歪み最適化をリアルタイム動画ストリーミングに実用化するにはどうすればよいか？
• RQ2 RDOに基づく伝送は、動的AAVネットワークにおける時間的動画品質とフレーム回復にどのような影響を与えるか？
• RQ3 MJPEG/SMOKE、MPEG2、H.264といった異なる動画コーデックは、RDO最適化伝送下で歪みと信頼性の観点からどのように比較されるか？
• RQ4 変動するチャネル状態下でも、RDOベースのストリーミングは実世界のAAV飛行実験において高い動画品質と低遅延を維持できるか？
• RQ5 AAVベースの動画ストリーミングにおいて、計算複雑性、帯域使用量、動画品質の間の主なトレードオフは何か？

主な発見

• LCRDOアルゴリズムは、すべての飛行実験において受信動画時間の割合が最も高かった（ケースc）、これは優れた時間的動画品質とフレーム損失の低減を示している。
• 平均SSIMインデックスは、すべての伝送ケースでほぼ同等であった。これは、空間的歪みが主にコーデックの特性に依存しており、伝送アルゴリズムの影響をほとんど受けていないことを示している。
• MJPEG/SMOKEは、部分的なフレームを破棄する動作により、不完全なデコードからの歪みの拡大を回避できるため、平均SSIMにおいてMPEG2を上回った。
• LCRDO-Adaptiveアルゴリズムは、1つの地上局に対して2つの動画ストリームを同時に伝送することに成功し、複数ソース／複数宛先のAAVネットワークへの実装可能性を示した。
• 低計算能力プラットフォームではMJPEG/SMOKEが最良のパフォーマンスを示したが、中程度の計算能力ではMPEG2が適していた。高計算能力ではH.264がより高い帯域効率を達成した。
• 実験の繰り返しにおいて5%のばらつきが観測され、95%信頼区間内での測定精度が確認された。