[論文レビュー] What if we have Meta GPT? From Content Singularity to Human-Metaverse Interaction in AIGC Era

Lik‐Hang Lee, Pengyuan Zhou+2 more|arXiv (Cornell University)|Apr 15, 2023

Virtual Reality Applications and Impacts被引用数 4

ひとこと要約

本論文は、AI生成コンテンツ（AIGC）をコンテンツ単一性と人間-メタバース相互作用の促進要因として活用することで、メタバースにおけるコンテンツ不足と使いやすさのボトル neck を克服するためのAI生成メタバース（AIGM）フレームワークを提案する。このフレームワークは、人間-AI協働、AI生成、AI補助編集、複数ユーザーによる共同作成を可能にし、仮想・物理融合世界にAIGCを深く統合することで、コンテンツ作成の民主化とユーザーエクスペリエンスの向上を実現する。

ABSTRACT

The global metaverse development is facing a "cooldown moment", while the academia and industry attention moves drastically from the Metaverse to AI Generated Content (AIGC) in 2023. Nonetheless, the current discussion rarely considers the connection between AIGCs and the Metaverse. We can imagine the Metaverse, i.e., immersive cyberspace, is the black void of space, and AIGCs can simultaneously offer content and facilitate diverse user needs. As such, this article argues that AIGCs can be a vital technological enabler for the Metaverse. The article first provides a retrospect of the major pitfall of the metaverse applications in 2022. Second, we discuss from a user-centric perspective how the metaverse development will accelerate with AIGCs. Next, the article conjectures future scenarios concatenating the Metaverse and AIGCs. Accordingly, we advocate for an AI-Generated Metaverse (AIGM) framework for energizing the creation of metaverse content in the AIGC era.

研究の動機と目的

• 2022年型実験的メタバースにおけるコンテンツ不足と使いにくさが原因で、メタバース開発が停滞しているのを是正すること。
• AIGCがユーザー中心の視点から、メタバースの普及を加速する技術的エンablerとして果たす役割を明らかにすること。
• アイデーションからコンテンツ共有までをカバーするメタバースライフサイクルにAIGCを統合する概念的フレームワーク（AIGM）を提唱すること。
• AIGCを用いる際の共有仮想環境における主観的存在感と共感覚の課題を検討すること。
• 開発者だけでなく、ユーザー自身が共同で仮想世界を創り出せる人間中心的で民主的なコンテンツ作成モデルを提唱すること。

提案手法

• 人間-AI協働、AI生成、AI補助、人間による編集を統合したパイプラインとしてのAIGMフレームワークを導入する。
• ユーザーからの自然言語プロンプトに基づいて、生成AIモデルを用いて初期コンテンツを生成する。
• AI補助編集と複数ユーザーによる共同作成を通じて、反復的で洗練されたコンテンツ作成を支援する。
• インタラクションロジック（例：タップでアクティブ化）をAIGCに埋め込み、AI駆動の評価によるユーザーパフォーマンスと認知的負荷を評価する。
• スタンドアロンの仮想世界および物理的周辺環境（例：ARバックドロップ、動的オブジェクトの削除）へAIGCを統合する。
• AIGCをメタバースに埋め込むことで、ユーザーユーザーの状況と主観的存在感に基づいたリアルタイムで文脈に適したコンテンツ適応を可能にすべきだと提言する。

実験結果

リサーチクエスチョン

• RQ1 AIGCは、2022年にメタバースの普及を妨げたコンテンツ不足と使いやすさの障壁をどのように克服できるか？
• RQ2 AIGCは、メタバースにおけるコンテンツ単一性の実現と作成の民主化にどのような役割を果たせるか？
• RQ3 AIGCは、複数ユーザーが共有する仮想環境において、主観的存在感と共感覚をどのように支援できるか？
• RQ4 人間中心的で没入感のあるメタバース体験にAIGCを統合するための主要な設計原則は何か？
• RQ5 AIGMフレームワークは、アイデーションから生成、編集、共有に至るまで、人間-AI協働を円滑にどのように促進できるか？

主な発見

• 2022年のメタバース実験は、巨額の投資にもかかわらず、魅力的なコンテンツの不足と使いにくさ（特に3次元インタラクション技術の欠如）が原因で失敗に終わった。
• 明確なインタラクションの手がかりがないため、ユーザーは3次元UIに対して苦労し、試行錯誤に依存するようになり、認知的負荷が高くなる。
• 現在のAIGCツールは、正確なプロンプトがなければ、ユーザーの主観的状態（例：寝室で「落ち着いた雰囲気」）に適したコンテンツを生成するのに不十分である。
• AIGCは、Web 2.0が2次元コンテンツ作成を民主化したのと同様に、非技術的ユーザーが3次元コンテンツを生成できる救世主となる可能性がある。
• AIGMフレームワークは、統合された人間-AI協働と複数ユーザーによる共同作成を通じて、インスピレーションから共有までをカバーする包括的なコンテンツライフサイクルを可能にする。
• 仮想空間および物理的周辺空間へのAIGCの埋め込みにより、動的で感情的共鳴を誘う、パーソナライズされた仮想環境が実現できる。