[论文解读] Parametric Modelling Within Immersive Environments: Building a Bridge Between Existing Tools and Virtual Reality Headsets

Adrien Coppens, Tom Mens+1 more|arXiv (Cornell University)|Jun 13, 2019

3D Surveying and Cultural Heritage参考文献 5被引用 6

一句话总结

本文提出了一种 Grasshopper 的 VR 扩展，使用户能够在沉浸式环境中进行参数化建模，通过自然的手部手势和空间交互实时操控 3D 几何体。通过将 VR 输入模式与 Grasshopper 的参数化引擎集成，该系统实现了全尺寸、沉浸式的设计，并提供实时反馈，弥合了传统 2D 工具与沉浸式 3D 建模工作流程之间的差距。

ABSTRACT

Even though architectural modelling radically evolved over the course of its history, the current integration of Augmented Reality (AR) and Virtual Reality(VR) components in the corresponding design tasks is mostly limited to enhancing visualisation. Little to none of these tools attempt to tackle the challenge of modelling within immersive environments, that calls for new input modalities in order to move away from the traditional mouse and keyboard combination. In fact, relying on 2D devices for 3D manipulations does not seem to be effective as it does not offer the same degrees of freedom. We therefore present a solution that brings VR modelling capabilities to Grasshopper, a popular parametric design tool. Together with its associated proof-of-concept application, our extension offers a glimpse at new perspectives in that field. By taking advantage of them,one can edit geometries with real-time feedback on the generated models, without ever leaving the virtual environment. The distinctive characteristics of VR applications provide a range of benefits without obstructing design activities. The designer can indeed experience the architectural models at full scale from a realistic point-of-view and truly feels immersed right next to them.

研究动机与目标

• 解决尽管在建筑设计中 AR/VR 使用日益广泛，但 VR 环境中仍缺乏原生参数化建模支持的问题。
• 克服鼠标和键盘等 2D 输入设备在 3D 建模任务中的局限性。
• 实现在虚拟环境中无需离开 VR 空间的实时、沉浸式参数化几何编辑。
• 在成熟的参数化设计工具（如 Grasshopper）与新兴的 VR 硬件平台之间建立功能性桥梁。

提出的方法

• 开发了一款专用于 Grasshopper 的 VR 插件，使用户能够在虚拟现实环境中直接操作参数化定义。
• 实现了基于 VR 控制器的空间交互技术，支持通过 3D 手势进行几何编辑与参数调整。
• 集成了实时反馈机制，确保 VR 环境中的更改能立即反映在 Grasshopper 定义及其输出几何体中。
• 设计了一个概念验证应用，以演示工作流程，并验证沉浸式参数化建模的可行性。
• 利用 Unity 和 Oculus Rift SDK 构建 VR 界面，确保与 Grasshopper 数据结构的低延迟交互。
• 实现了全尺寸的第一人称视角可视化，以增强空间理解力与设计直觉。

实验结果

研究问题

• RQ1 能否将传统 2D 工具（如 Grasshopper）中的参数化建模工作流程有效迁移至沉浸式 VR 环境？
• RQ2 与鼠标和键盘输入相比，VR 中的自然手部手势与空间交互如何提升 3D 参数化建模的效率与直观性？
• RQ3 在实时 Grasshopper 计算与沉浸式 VR 渲染及交互之间同步时，面临哪些关键技术挑战？
• RQ4 沉浸式 VR 在多大程度上支持对参数化模型进行全尺寸、空间精确的设计探索与编辑？
• RQ5 VR 基于的参数化建模如何在保持 Grasshopper 算法工作流灵活性的同时，维持设计保真度与响应速度？

主要发现

• 所提出的 VR 扩展成功实现了在 Grasshopper 中通过沉浸式交互进行实时参数化建模，证明了此类工作流程的可行性。
• 设计师现在可以使用直观的手部手势在全尺寸下操控 3D 几何体，显著提升了空间感知力与设计沉浸感。
• 该系统在 VR 交互与 Grasshopper 参数化引擎之间保持了实时反馈，确保了视觉与计算的一致性。
• 概念验证应用证实，基于 VR 的参数化建模是可行的，并相较于传统 2D 界面提供了更优的设计直觉。
• 将 VR 输入模式与 Grasshopper 集成，减少了对 2D 输入设备的依赖，为 3D 空间中的建模提供了更自然、高效的体验。
• 该解决方案在将 Grasshopper 参数化引擎扩展至空间沉浸环境的同时，完整保留了其全部功能。