[论文解读] Exploring Immersive Interpersonal Communication via AR

Kyungjun Lee, Hong Li+6 more|arXiv (Cornell University)|Nov 28, 2022

Virtual Reality Applications and Impacts被引用 1

一句话总结

本文介紹了 ARwand，這是一種增強現實訊息系統，可讓使用者透過智慧眼鏡將沉浸式 AR 訊息——帶有語音註解的 3D 物體——傳送至接收者的實體環境。24 名參與者的使用者研究顯示，AR 訊息能提升情感表達與社交存在感，但隱私權、視覺遮蔽與訊息傳遞控制等問題，則成為實際應用的主要挑戰。

ABSTRACT

A central challenge of social computing research is to enable people to communicate expressively with each other remotely. Augmented reality has great promise for expressive communication since it enables communication beyond texts and photos and towards immersive experiences rendered in recipients' physical environments. Little research, however, has explored AR's potential for everyday interpersonal communication. In this work, we prototype an AR messaging system, ARwand, to understand people's behaviors and perceptions around communicating with friends via AR messaging. We present our findings under four themes observed from a user study with 24 participants, including the types of immersive messages people choose to send to each other, which factors contribute to a sense of immersiveness, and what concerns arise over this new form of messaging. We discuss important implications of our findings on the design of future immersive communication systems.

研究动机与目标

• 探討 AR 如何超越傳統文字、圖片與影片訊息，提升表達性與人際溝通的深度。
• 理解使用者在傳送與接收沉浸式 AR 訊息時的行為、感知與挑戰。
• 探討情境觸發機制（例如時間、位置、視覺標記）如何提升訊息的相關性與傳遞效果。
• 識別未來沉浸式通訊系統在促進情感連結與社交存在感方面的設計啟示。

提出的方法

• 開發 ARwand，一個原型 AR 訊息系統，讓智慧手機使用者能將帶有語音註解的 3D AR 內容傳送給智慧眼鏡使用者。
• 支援基於時間、位置或視覺標記（例如特定襯衫或物品）的訊息觸發，以實現情境化傳遞。
• 進行一項持續 10 天、參與者共 24 名（12對）的使用者研究，每位參與者均擔任一次傳送者或接收者。
• 透過訪談與觀察收集質性資料，聚焦於訊息創作、沉浸感感知、反應行為與隱私權疑慮。
• 利用自動錄製接收者的反應（例如語音與面部反應）功能，讓傳送者能即時觀看反饋。
• 根據四個主題分析研究發現：訊息類型、觸發機制使用、沉浸感，以及反應行為。

实验结果

研究问题

• RQ1 使用者選擇傳送哪些類型的沉浸式訊息？這些訊息如何與共享記憶或情感表達相關？
• RQ2 基於時間、位置或視覺標記的情境觸發，如何影響 AR 訊息傳遞的相關性與成功率？
• RQ3 哪些因素促成 AR 訊息中的沉浸感？過度沉浸或視覺遮蔽又會引發哪些問題？
• RQ4 接收者如何反應 AR 訊息？他們希望以何種方式與傳送者分享反饋？

主要发现

• 傳送者使用 AR 訊息來更生動地傳達情感與分享記憶，常選擇如會動的狗等富有趣味性或懷舊感的 3D 物體。
• 參與者表示 AR 訊息在接收者身上引發比文字或照片訊息更強烈的情感反應，增強了存在感與連結感。
• 基於時間或位置的觸發顯著提升訊息的被觀看率，使用者指出，將訊息時機與接收者的當下情境配合，能提升訊息的影響力與被認為是用心的感覺。
• 當訊息在情境上合適時，接收者認為沉浸式 AR 訊息令人愉快，但亦對日常環境中的視覺遮蔽與分心表示擔憂。
• 許多接收者希望與傳送者分享其即時反應，但希望對分享介面有更多控制權，特別是在隱私權與自動錄製方面。
• 傳送者表達出希望更了解接收者的日常作息與環境，以更恰當時機傳送訊息，突顯對情境感知與備援傳遞機制的需求。