[논문 리뷰] The Metaverse: Survey, Trends, Novel Pipeline Ecosystem & Future Directions

Hani Sami, Ahmad Hammoud외 15명|arXiv (Cornell University)|2023. 04. 18.

Virtual Reality Applications and Impacts참고 문헌 239인용 수 4

한 줄 요약

이 종합 조사에서는 메타버스의 전체 개발 루트를 다루는 새로운 다층적 파이프라인 생태계를 제안한다. 이는 인프라, 환경 디지털화, 사용자 상호작용의 세 층으로 구성되며, AI, 블록체인, 엣지 컴퓨팅 등의 유효 기술을 통합하여 탈중앙화, 상호운용성, 사용자 경험의 과제를 해결한다. 본 조사는 메타버스 개발 전 과정을 포괄하는 최초의 종합적이고 다학문적 분석을 제공하며, 향후 연구 및 개발을 위한 실천 가능한 연구 방향과 해결책을 제시한다.

ABSTRACT

The Metaverse offers a second world beyond reality, where boundaries are non-existent, and possibilities are endless through engagement and immersive experiences using the virtual reality (VR) technology. Many disciplines can benefit from the advancement of the Metaverse when accurately developed, including the fields of technology, gaming, education, art, and culture. Nevertheless, developing the Metaverse environment to its full potential is an ambiguous task that needs proper guidance and directions. Existing surveys on the Metaverse focus only on a specific aspect and discipline of the Metaverse and lack a holistic view of the entire process. To this end, a more holistic, multi-disciplinary, in-depth, and academic and industry-oriented review is required to provide a thorough study of the Metaverse development pipeline. To address these issues, we present in this survey a novel multi-layered pipeline ecosystem composed of (1) the Metaverse computing, networking, communications and hardware infrastructure, (2) environment digitization, and (3) user interactions. For every layer, we discuss the components that detail the steps of its development. Also, for each of these components, we examine the impact of a set of enabling technologies and empowering domains (e.g., Artificial Intelligence, Security & Privacy, Blockchain, Business, Ethics, and Social) on its advancement. In addition, we explain the importance of these technologies to support decentralization, interoperability, user experiences, interactions, and monetization. Our presented study highlights the existing challenges for each component, followed by research directions and potential solutions. To the best of our knowledge, this survey is the most comprehensive and allows users, scholars, and entrepreneurs to get an in-depth understanding of the Metaverse ecosystem to find their opportunities and potentials for contribution.

연구 동기 및 목표

• 메타버스의 전체 개발 파이프라인을 인프라에서 사용자 상호작용까지 포함하는 통합적이고 다학문적인 종합 조사가 부족한 점을 보완하기 위해.
• 기술적, 사회적, 윤리적 차원에서 메타버스 개발의 핵심 과제를 특정하고 분석하기 위해.
• 메타버스 개발을 이해하기 위한 체계적인 프레임워크로 새로운 다층적 파이프라인 생태계를 제안하기 위해.
• AI, 블록체인, 엣지 컴퓨팅 등의 유효 기술이 파이프라인 각 구성 요소에 미치는 영향을 분석하기 위해.
• 학계 및 산업계가 메타버스 생태계를 발전시킬 수 있도록 실천 가능한 연구 방향과 해결책을 제공하기 위해.

제안 방법

• 세 층으로 구성된 파이프라인 생태계를 제안한다: (1) 인프라(하드웨어, XR 프레임워크, MaaS), (2) 환경 디지털화(아바타, 렲링, 세션 관리), (3) 사용자 상호작용(사용자-사용자, 사용자-기업, 사용자-물체 상호작용).
• 최근 최신 기술 문헌을 기반으로 다수 수준의 분류 체계를 사용해 각 층의 구성 요소를 분석한다.
• AI, 블록체인, 개인정보 및 보안, 윤리, 비즈니스, 사회심리학 등의 유효 영역이 구성 요소 발전에 미치는 영향을 평가한다.
• 현실성 향상, 효율성 향상, 추적 정확도 향상을 위해 생성형 설계, 센서 융합, Li-DAR, 깊이 카메라 기술을 통합한다.
• 탈중앙화된 소유권과 상호운용성을 위해 공개된 설계 자료 라이브러리와 크로스체인 블록체인 메커니즘을 제안한다.
• 게임화 및 스웜 로봇 기반 AI 전략을 도입하여 메타버스 내 사용자 참여도와 물체 상호작용 품질을 향상시킨다.

실험 결과

연구 질문

• RQ1 메타버스 개발의 전 단계를 커버할 수 있는 종합적이고 다층적 파이프라인 생태계는 어떻게 구성될 수 있는가?
• RQ2 메타버스 파이프라인의 각 층에서 발생하는 주요 기술적, 사회적, 윤리적 과제는 무엇이며, 어떻게 해결할 수 있는가?
• RQ3 AI, 블록체인, 엣지 컴퓨팅 등의 유효 기술은 메타버스에서 탈중앙화, 상호운용성, 사용자 경험 향상에 어떻게 기여하는가?
• RQ4 디지털 트윈, 생성형 설계, 실시간 맵핑은 환경 디지털화 및 사용자-물체 상호작용 발전에 어떤 역할을 하는가?
• RQ5 메타버스 인프라, 환경 모델링, 상호작용 설계의 기존 한계를 극복하기 위해 필요한 향후 연구 방향과 해결책은 무엇인가?

주요 결과

• 제안된 다층적 파이프라인 생태계는 메타버스 개발 전 과정을 인프라, 환경 디지털화, 사용자 상호작용 층으로 종합적으로 맵핑한 최초의 사례이다.
• AI 및 생성형 설계 기술은 동적이고 맞춤형이며 최적화된 가상 자산을 가능하게 하여 물체 모델링 및 사용자 상호작용의 현실성, 효율성, 개인화를 크게 향상시킨다.
• 센서 융합, Li-DAR, 깊이 카메라 기반 기술로 실시간 추적 및 맵핑은 구현 가능하지만, 동적 물체 배치 및 동기화에 대한 추가 연구가 필요하다.
• 특히 크로스체인 메커니즘을 통한 블록체인 통합은 메타버스 플랫폼 간 가상 자산의 안정적이고 탈중앙화된 소유권 및 이관을 가능하게 한다.
• 메타버스 콘텐츠 제작의 확장성, 혁신성, 포용성을 지원하기 위해 설계 자산의 공개적이고 공동 사용 가능한 레포지터리가 필수적이다.
• 게임화 및 AI 기반 스웜 로봇 기술은 몰입형 환경에서 사용자 참여도 향상과 상호작용 품질 향상에 유망한 길을 제시한다.