[论文解读] Realizing Immersive Communications in Human Digital Twin by Edge Computing Empowered Tactile Internet: Visions and Case Study

Xiang Hao, Changyan Yi+6 more|arXiv (Cornell University)|Apr 15, 2023

Virtual Reality Applications and Impacts被引用 6

一句话总结

本文提出了一种由边缘计算赋能的触觉互联网（ECoTI）框架，以实现具有沉浸式多感官交互的实时、高保真人类数字孪生（HDT）应用。通过将边缘计算与触觉互联网相结合，ECoTI降低了延迟，提升了可靠性，并支持物理孪生与虚拟孪生之间的动态同步，该有效性已在物理治疗案例研究中得到验证，显示出系统响应能力与用户体验的显著提升。

ABSTRACT

Human digital twin (HDT) is expected to revolutionize the future human lifestyle and prompts the development of advanced human-centric applications (e.g., Metaverse) by bridging physical and virtual spaces. However, the fulfillment of HDT poses stringent demands on the pervasive connectivity, real-time feedback, multi-modal data transmission and ultra-high reliability, which urge the need of enabling immersive communications. In this article, we shed light on the design of an immersive communication framework for HDT by edge computing empowered tactile Internet (namely IC-HDT-ECoTI). Aiming at offering strong interactions and extremely immersive quality of experience, we introduce the system architecture of IC-HDT-ECoTI, and analyze its major design requirements and challenges. Moreover, we present core guidelines and detailed steps for system implementations. In addition, we conduct an experimental study based on our recently built testbed, which shows a particular use case of IC-HDT-ECoTI in physical therapy, and the obtained results indicate that the proposed framework can significantly improve the effectiveness of the system. Finally, we conclude this article with a brief discussion of open issues and future directions.

研究动机与目标

• 应对人类数字孪生（HDT）的严格需求，包括实时反馈、超高可靠性以及高保真虚拟建模。
• 克服独立触觉互联网（TI）在处理多感官数据、网络延迟和系统可扩展性方面的局限性。
• 设计一种集成的ECoTI框架，统一数据采集、边缘处理与实时传输，以实现沉浸式HDT体验。
• 通过真实世界的物理治疗用例，结合主观与客观性能评估，验证ECoTI的可行性与有效性。
• 识别未来HDT系统在预测性触觉、安全性和沉浸式用户体验方面的开放性挑战。

提出的方法

• 部署一种分布式边缘计算架构，将边缘服务器部署在终端用户附近，以最小化HDT通信中的往返延迟。
• 在触觉设备（如手套、Geomagic Touch）上采用固定的1 kHz频率死区编码，以压缩并同步触觉信号与视频流。
• 集成3D渲染引擎（Unity与Unreal）以生成高保真、可动态切换的虚拟治疗环境。
• 实施协同边缘计算，实现在分布式节点上对多模态数据（视频、音频、触觉）的低延迟、并行处理。
• 在边缘节点应用最优路由与切换策略，以确保时间敏感的多模态数据高效传输。
• 结合边缘智能与基于人工智能的信号处理，以预测、过滤并压缩触觉反馈，从而提升系统响应速度。

实验结果

研究问题

• RQ1 边缘计算如何克服独立触觉互联网在人类数字孪生应用中面临的延迟、可靠性和可扩展性限制？
• RQ2 实现物理孪生与虚拟孪生之间实时、高保真同步，需要怎样的系统架构与设计原则？
• RQ3 ECoTI在远程物理治疗等沉浸式HDT应用中，能在多大程度上提升用户体验质量（QoE）？
• RQ4 边缘智能在实现预测性与低延迟触觉反馈以支持动态人机交互方面发挥何种作用？
• RQ5 在人机协同的HDT系统中，会面临哪些安全、隐私与伦理挑战，又该如何缓解？

主要发现

• ECoTI框架通过在数据源附近处理数据，显著降低了系统延迟，实现了物理孪生与虚拟孪生之间的实时交互。
• 志愿者的主观评估证实，在物理治疗用例中用户体验高度沉浸且逼真。
• 客观测量显示抖动与延迟极低，通过死区编码实现1 kHz的触觉信号同步，确保了反馈的一致性。
• Unity与Unreal引擎的集成实现了高清渲染与快速场景切换，提升了视觉保真度与用户参与度。
• 协同边缘计算实现了多模态数据的低延迟、并行处理，提升了系统响应速度与可靠性。
• 案例研究证明，ECoTI能有效支持对多感官模态间精确同步有高要求的复杂实时HDT应用。