[论文解读] What if we have Meta GPT? From Content Singularity to Human-Metaverse Interaction in AIGC Era

Lik‐Hang Lee, Pengyuan Zhou+2 more|arXiv (Cornell University)|Apr 15, 2023

Virtual Reality Applications and Impacts被引用 4

一句话总结

本文提出了一种人工智能生成元宇宙（AIGM）框架，通过利用人工智能生成内容（AIGC）作为内容单一化和人与元宇宙交互的催化剂，以克服元宇宙在内容和可用性方面的瓶颈。该框架支持人机协作、AI生成、AI辅助编辑以及多用户共同创作，将AIGC深度嵌入虚实融合世界，实现内容创作的民主化并提升用户体验。

ABSTRACT

The global metaverse development is facing a "cooldown moment", while the academia and industry attention moves drastically from the Metaverse to AI Generated Content (AIGC) in 2023. Nonetheless, the current discussion rarely considers the connection between AIGCs and the Metaverse. We can imagine the Metaverse, i.e., immersive cyberspace, is the black void of space, and AIGCs can simultaneously offer content and facilitate diverse user needs. As such, this article argues that AIGCs can be a vital technological enabler for the Metaverse. The article first provides a retrospect of the major pitfall of the metaverse applications in 2022. Second, we discuss from a user-centric perspective how the metaverse development will accelerate with AIGCs. Next, the article conjectures future scenarios concatenating the Metaverse and AIGCs. Accordingly, we advocate for an AI-Generated Metaverse (AIGM) framework for energizing the creation of metaverse content in the AIGC era.

研究动机与目标

• 解决2022年实验性元宇宙因内容匮乏和可用性差而导致的发展停滞问题。
• 从以用户为中心的视角，探索AIGC如何作为技术推动力，加速元宇宙的采用。
• 提出一个概念性框架——AIGM，将AIGC整合到元宇宙生命周期中，涵盖从构思到内容共享的全过程。
• 探讨在使用AIGC时，共享虚拟环境中主观存在感和共感知所面临的挑战。
• 倡导一种以人为本、内容创作民主化的元宇宙模式，使用户（而不仅仅是开发者）能够共同创作并塑造虚拟世界。

提出的方法

• 将AIGM框架作为端到端流程，整合人机协作、AI生成、AI辅助和人工编辑，用于元宇宙内容创作。
• 采用生成式AI模型，根据用户的自然语言提示生成初始内容。
• 通过AI辅助编辑和多用户协作实现内容创作的迭代优化。
• 将AIGC与交互逻辑（例如点击激活）结合，并通过AI驱动的评估方法衡量用户表现和认知负荷。
• 将AIGC集成到独立的虚拟世界以及与物理环境相邻的场景中（例如AR背景、动态物体移除）。
• 提出AIGC应嵌入元宇宙，以实现基于用户情境和主观存在感的实时、上下文感知的内容自适应。

实验结果

研究问题

• RQ1 AIGC如何克服2022年元宇宙因内容匮乏和可用性障碍而受阻的问题？
• RQ2 AIGC在实现内容单一化和推动元宇宙中创作民主化方面可发挥何种作用？
• RQ3 AIGC如何支持共享、多用户虚拟环境中的主观存在感和共感知？
• RQ4 将AIGC整合到以人为本的沉浸式元宇宙体验中的关键设计原则是什么？
• RQ5 AIGM框架如何实现内容构思、生成、编辑和共享过程中人机协作的无缝衔接？

主要发现

• 2022年的元宇宙实验因缺乏吸引人的内容和可用性差而失败，尤其是在3D交互技术方面，尽管投入巨大。
• 由于缺乏明确的交互提示，用户在使用3D界面时面临困难，导致依赖试错法，认知负荷较高。
• 当前的AIGC工具在未获得精确提示的情况下，难以生成符合用户主观状态（例如‘平静’状态下的卧室）的上下文恰当内容。
• AIGC可成为元宇宙的救星，使非技术用户也能创建3D内容，正如Web 2.0曾赋能2D内容创作一样。
• AIGM框架通过整合人机协作和多用户共同创作，实现了从灵感激发到内容分享的完整内容生命周期。
• 将AIGC嵌入虚拟空间和与物理空间相邻的环境，可实现动态、情感共鸣强且个性化的虚拟环境。