[論文レビュー] Realizing the Metaverse with Edge Intelligence: A Match Made in Heaven

Wei Yang Bryan Lim, Zehui Xiong+5 more|arXiv (Cornell University)|Jan 5, 2022

Virtual Reality Applications and Impacts被引用数 10

ひとこと要約

本稿では、メタバースを実現する基盤インfraとしてエッジインテリジェンスを提案し、AI駆動のエッジコンピューティングとバーチャルワールドシステムを統合することで、低遅延でスケーラブルかつプライバシーを確保した没入型体験を実現する。この有効性は、共同仮想都市開発の事例研究を通じて示され、予約プランとオンデマンドプランの間でのコスト最適化リソース割り当てを目的とした二段階確率的整数プログラミングモデルが提示されている。

ABSTRACT

Dubbed "the successor to the mobile Internet", the concept of the Metaverse has recently exploded in popularity. While there exists lite versions of the Metaverse today, we are still far from realizing the vision of a seamless, shardless, and interoperable Metaverse given the stringent sensing, communication, and computation requirements. Moreover, the birth of the Metaverse comes amid growing privacy concerns among users. In this article, we begin by providing a preliminary definition of the Metaverse. We discuss the architecture of the Metaverse and mainly focus on motivating the convergence of edge intelligence and the infrastructure layer of the Metaverse. We present major edge-based technological developments and their integration to support the Metaverse engine. Then, we present our research attempts through a case study of virtual city development in the Metaverse. Finally, we discuss the open research issues.

研究の動機と目的

• シームレスで持続的かつ相互運用可能なバーチャルエコシステムを支援する包括的アーキテクチャを確立すること。
• エッジインテリジェンス（AIを用いたエッジとエッジを用いたAIを含む）のメタバースのインfra層への統合を促進し、厳密なリアルタイム性とスケーラビリティ要件を満たすこと。
• 共同仮想都市開発の事例研究を通じて、エッジインテリジェンスが複雑なバーチャルワールドアプリケーションを支援する可能性を実証すること。
• エッジ駆動のメタバースにおけるユーザーQoE、B5G通信、相互運用性、プライバシー、経済的要因に関する未解決の課題を特定し、それらに対処すること。

提案手法

• 需要の不確実性を考慮した状況下で運用コストを最小化する目的で、予約プランとオンデマンドプラン間のリソース割り当てを最適化する二段階確率的整数プログラミング（SIP）定式化を提案する。
• センシング、通信、コンピューティングのオフロードにおけるリアルタイム意思決定にAIを活用することで、エッジインテリジェンスをメタバースエンジンに統合する。
• SIPモデルにおける確率分布の設定に、ヒストリカルなユーザー需要データを活用し、予測的かつコスト効率の良いリソースプロビジョニングを可能にする。
• 仮想都市開発を支援するエッジベースのフレームワークを設計し、メタバースにおける共同作業、スケーラビリティ、低遅延レンダリングとインタラクションを実現する。
• アイトラッキングに基づく注目度の高い視覚領域を優先して高品質でレンダリングするため、計算負荷を低減するためのフォビュレイテッドレンダリングを活用するAI技術を採用する。
• データレートの最大化ではなく、情報の価値（VoI）を重視する、意味的認識型で目的志向の通信モデルを提案する。

Figure 1: The Metaverse architecture features the immersive and real-time physical-virtual world interaction supported by the Metaverse engine. The supporting infrastructure ensures that the Metaverse is scalable, shardless, enables ubiquitous access, and is trustworthy for users.

実験結果

リサーチクエスチョン

• RQ1 エッジインテリジェンスをどのように体系的にメタバースのインfra層に統合することで、リアルタイム性、スケーラビリティ、低遅延のバーチャルエクスペリエンスを支援できるか？
• RQ2 需要の不確実性が存在する状況下で、バーチャルサービスプロバイダー（VSP）の運用コストを最小化するリソース割り当て戦略は何か？
• RQ3 分散型でマルチプラットフォームのバーチャルワールド間で、相互運用性と信頼性をどのように確保できるか？
• RQ4 従来のネットワークメトリクスを超えて、没入型および知覚的要件を反映するための新しいQoEメトリクスは何か？
• RQ5 ブロックチェーンやAIといった新技術を活用することで、セキュリティとプライバシーを確保するとともに、新たな経済モデルを実現するにはどうすればよいか？

主な発見

• 提案された二段階確率的整数プログラミングモデルは、ヒストリカルな需要データを活用してユーザー負荷を予測することで、確率的でない手法よりも著しく低い運用コストを達成している。
• エッジインテリジェンスの統合により、AI推論とレンダリングタスクの効率的なオフロードが可能となり、没入型バーチャル環境における遅延低減と応答性向上が実現された。
• アイトラッキングデータを基に駆動されるフォビュレイテッドレンダリングにより、注目度の高い領域のみを高品質でレンダリングすることで、計算負荷が低減され、人間の視覚認識に合致した動作が可能になった。
• メタバースでは、従来のQoEメトリクスから、人間の視覚認識の基盤となる指標（例：13msの閾値）にまで拡張された、知覚に基づいたメトリクスへのシフトが求められる。
• B5Gネットワークは、単なるデータレートではなく、情報の価値（VoI）を重視する意味的認識型・目的志向の通信モデルに進化させる必要がある。
• 相互運用性の標準化は、ユーザー生成コンテンツやクロスプラットフォーム相互作用を可能にするために不可欠であり、その欠如はシームレスなメタバース実現の主要な障壁となっている。

Figure 2: Applications of Edge Intelligence for the Metaverse.