[논문 리뷰] Social VR and multi-party holographic communications: Opportunities, Challenges and Impact in the Education and Training Sectors

Mario Montagud, Gianluca Cernigliaro외 4명|arXiv (Cornell University)|2022. 10. 01.

Virtual Reality Applications and Impacts인용 수 7

한 줄 요약

이 논문은 교육 및 훈련 분야에서 전환적 도구로 작용하는 사회적 가상현실(Social VR)과 다자간 홀로그램 통신을 조사하며, 기존 비디오 회의 방식의 한계를 극복하는 몰입형이고 공간 인식 능력을 갖춘 환경을 제안한다. 포prehensive 리뷰를 통해 Social VR가 가상 수업, 협업 설계 및 원격 회의와 같은 분야에서 상호작용 품질, 공재현성(co-presence), 상황 인식 능력을 향상시킨다는 점을 입증한다. 同시에 이러한 기술의 광범위한 도입을 저해하는 핵심 기술적 및 방법론적 과제를 규명한다.

ABSTRACT

Technological advances can bring many benefits to our daily lives, and this includes the education and training sectors. In the last years, online education, teaching and training models are becoming increasingly adopted, in part influenced by major circumstances like the pandemic. The use of videoconferencing tools in such sectors has become fundamental, but recent research has shown their multiple limitations in terms of relevant aspects, like comfort, interaction quality, situational awareness, (co-)presence, etc. This study elaborates on a new communication, interaction and collaboration medium that becomes a promising candidate to overcome such limitations, by adopting immersive technologies: Social Virtual Reality (VR). First, this article provides a comprehensive review of studies having provided initial evidence on (potential) benefits provided by Social VR in relevant use cases related to education, such as online classes, training and co-design activities, virtual conferences and interactive visits to virtual spaces, many of them including comparisons with classical tools like 2D conferencing. Likewise, the potential benefits of integrating realistic and volumetric users' representations to enable multi-party holographic communications in Social VR is also discussed. Next, this article identifies and elaborates on key limitations of existing studies in this field, including both technological and methodological aspects. Finally, it discusses key remaining challenges to be addressed to fully exploit the potential of Social VR in the education sector.

연구 동기 및 목표

• Social VR와 다자간 홀로그램 통신이 교육 및 훈련 경험을 향상시키는 데서 잠재력을 평가하는 것.
• 기존 비디오 회의 도구가 상호작용 품질, 공재현성, 상황 인식 능력을 향상시키는 데서 겪는 한계를 규명하는 것.
• 협업 학습을 위한 몰입형 가상 환경에서 사실적이고 부피형 사용자 표현의 이점을 분석하는 것.
• 이러한 시스템이 교육 분야에 광범위하게 도입되는 데 걸림돌이 되는 핵심 기술적 및 방법론적 과제를 요약하는 것.
• 몰입형 교육 기술 분야의 향후 연구 및 개발을 위한 로드맵을 제시하는 것.

제안 방법

• Social VR가 교육 분야에 미치는 영향을 다룬 연구에 대한 포괄적인 문헌 리뷰를 수행하며, 2차원 비디오 회의 도구와의 비교를 포함한다.
• 가상 수업, 공동 설계 세션, 몰입형 환경에서의 원격 회의와 같은 사례에서의 실증적 증거를 분석한다.
• Social VR에서 다자간 홀로그램 통신을 가능하게 하는 사용자에 대한 부피형 및 사실적인 3차원 표현의 통합을 평가한다.
• 렌더링 정밀도, 지연 시간, 하드웨어 접근성과 같은 기술적 제약을 규명한다.
• 기존 연구에서의 방법론적 격차를 평가하며, 표준화된 평가 지표 부족 및 종단 연구 부족을 포함한다.
• 결과를 종합하여 교육 및 훈련 맥락에서의 향후 구현을 위한 과제와 기회의 프레임워크를 구성한다.

실험 결과

연구 질문

• RQ1 가상 수업 및 협업 작업 환경에서 Social VR는 기존 2차원 비디오 회의 도구에 비해 사용자 참여도, 공재현성, 상호작용 품질 측면에서 어떻게 다를까?
• RQ2 Social VR 내 다자간 홀로그램 통신에 사실적이고 부피형 사용자 표현을 통합함으로써 협업 학습에 어떤 특정한 이점이 있는가?
• RQ3 현재 Social VR의 교육 및 훈련 분야에서의 확장성과 효과성에 제약을 주는 기술적 및 방법론적 한계는 무엇인가?
• RQ4 몰입형 가상 환경이 가상 공동 설계나 원격 회의 중 상황 인식 능력과 협업 역학을 어떻게 향상시킬 수 있는가?
• RQ5 공식적 및 전문적 훈련 프로그램에서 Social VR와 홀로그램 통신의 광범위한 도입을 가능하게 하기 위해 해결해야 할 핵심 과제는 무엇인가?

주요 결과

• Social VR는 가상 수업 및 협업 작업에서 기존 2차원 비디오 회의 도구에 비해 공재현성과 상호작용 품질을 크게 향상시킨다.
• 사실적이고 부피형 사용자 표현의 통합은 사회적 존재감과 비언어적 의사소통을 향상시켜 다자간 가상 환경에서 더욱 자연스럽고 몰입도 높은 상호작용을 가능하게 한다.
• 교육 분야에서 Social VR에 관한 기존 연구는 소규모 표본 크기, 대조군 부재, 일관되지 않은 평가 지표 등의 방법론적 한계를 겪고 있다.
• 핵심 기술적 과제로는 높은 지연 시간, 3차원 애니메이션의 렌더링 정밀도 부족, 특히 광범위한 교육적 배포를 위한 충분한 하드웨어 접근성 부족이 있다.
• 가상 회의 및 3차원 가상 공간의 상호작용 방문은 공간 상호작용과 공동 가상 작업공간이 지원될 경우 몰입형 학습에 강력한 잠재력을 보인다.
• 다소 유망한 결과에도 불구하고, 학습 성과에 대한 장기적 영향과 확장 가능성은 여전히 다루어지지 않은 채 중요한 연구 격차를 드러내고 있다.