[논문 리뷰] Breaking the Barriers to True Augmented Reality

Christian Sandor, Martin Fuchs외 5명|arXiv (Cornell University)|2015. 12. 17.

Augmented Reality Applications참고 문헌 21인용 수 18

한 줄 요약

이 논문은 현실과 구분되지 않는 증강현실을 목표로 하는 '진정한 증강현실(True AR)'을 제안한다. 이는 가상 콘텐츠가 물리적 세계와 유기적으로 융합되는 시각을 담고 있으며, 증강현실이 인지적으로 구분 불가능해지는지를 객관적으로 평가하기 위해 '증강현실 튜링 테스트'를 도입한다. 이는 기술적, 윤리적, 사회적 과제를 강조한다.

ABSTRACT

In recent years, Augmented Reality (AR) and Virtual Reality (VR) have gained considerable commercial traction, with Facebook acquiring Oculus VR for \$2 billion, Magic Leap attracting more than \$500 million of funding, and Microsoft announcing their HoloLens head-worn computer. Where is humanity headed: a brave new dystopia-or a paradise come true? In this article, we present discussions, which started at the symposium "Making Augmented Reality Real", held at Nara Institute of Science and Technology in August 2014. Ten scientists were invited to this three-day event, which started with a full day of public presentations and panel discussions (video recordings are available at the event web page), followed by two days of roundtable discussions addressing the future of AR and VR.

연구 동기 및 목표

• 증강현실이 현실과 구분되지 않는 상태가 되는 시점을 명확히 정의하고 기준을 설정하는 것, 이를 '진정한 AR'이라 칭한다.
• 실시간으로 가상 콘텐츠를 물리적 세계와 일관되게 융합시키는 데 있어 기술적 및 인지적 과제를 해결하는 것.
• 편재하는 현실적인 증강현실이 개인정보, 감시 비대칭성, 정보 투명성 등의 윤리적 및 사회적 영향을 초래하는 이유를 분석하는 것.
• 핵심 AR 기술 외에도 윤리학, 철학, 사회과학을 포함한 다학제적 연구 방향을 제안하는 것.
• 진정한 AR 달성을 평가하기 위한 측정 가능하고 프로토콜 기반의 표준으로 증강현실 튜링 테스트를 제안하는 것.

제안 방법

• 앨런 튜링의 원래 테스트를 영감으로 삼아, 다중 감각 모ality에 걸쳐 인지적으로 구분 불가능성을 중심으로 한 증강현실 튜링 테스트를 제안한다.
• 시각, 촉각 등 감각 모ality, 물리 법칙 준수(예: 물체 상호작용, 시간 경과), 실제 상태와 증강 상태 간 전환 메커니즘 등의 기준을 바탕으로 테스트 파rameters를 정의한다.
• 성공적인 진정한 AR 시스템은 사용자가 촉각, 요리, 현미경 또는 CT 스캐너와 같은 도구를 사용해 가상 콘텐츠를 감지하지 못해야 한다고 강조한다.
• 테스트 프로토콜은 적용 분야에 따라 민첩하고 특수화되어야 하며, 일률적인 기준을 피해야 한다.
• 감시 비대칭성과 개인정보 침해 등의 윤리적 리스크를 완화하기 위해 'AR 파이어월'과 대칭적 AR 사용 개념을 도입한다.
• 윤리학, 예술, 사회과학의 통찰을 AR 개발에 통합하여 책임감 있는 혁신을 이끌어내야 한다고 주장한다.

실험 결과

연구 질문

• RQ1 어떤 기준이 '진정한 AR'로 간주되는 시스템을 정의하는가—즉, 사용자가 인지적으로 구분할 수 없을 정도로 현실과 구분되지 않는가?
• RQ2 튜링 테스트를 모델로 삼은 표준화된 객관적 테스트를 개발하여, 증강현실이 인지적으로 구분 불가능해졌는지 검증할 수 있는가?
• RQ3 물리 환경과 실시간으로 유기적으로 융합된 가상 콘텐츠를 구현하는 데 있어 핵심적인 기술적 과제는 무엇인가?
• RQ4 진정한 AR의 맥락에서 감시 비대칭성, 개인정보 유출, 정보 투명성 등의 윤리적 문제들은 어떻게 발생하는가?
• RQ5 윤리학, 철학, 사회과학과 같은 다학제 분야가 진정한 AR의 개발 및 구현 과정에 어떤 역할을 해야 하는가?

주요 결과

• 진정한 AR는 사용자가 물리적 상호작용이나 장기 관찰을 통해 가상 콘텐츠를 감지하지 못할 정도로 인지적 일관성을 유지하는 인지의 수정으로 정의된다.
• 증강현실 튜링 테스트는 현실과의 인지적 구분 불가능성을 객관적으로 평가하기 위한 실현 가능한 프로토콜 기반 방법으로 제안된다.
• 테스트는 민감하고 맥락에 따라 유연해야 하며, 감각 모ality, 물리적 일관성(예: 물체 상호작용, 시간 경과), 전환 메커니즘을 고려해야 한다.
• 현재의 증강현실 시스템은 촉각, 시간, 환경 역동성에서 인지적 일관성을 유지하지 못해 진정한 AR에 못 미친다.
• 특히 사용자가 다른 사람을 인지할 수는 있지만 그 반대는 불가능한 상황에서 감시 비대칭성과 개인정보 유출 등의 윤리적 리스크가 크다.
• 진정한 AR의 개발은 컴퓨터 그래픽스, 시각, 광학 분야의 발전 외에도 윤리학, 철학, 사회과학의 통합을 통해 책임감 있는 배포를 이끌어내야 한다.