[论文解读] Nutty-based Robot Animation -- Principles and Practices

Tiago Ribeiro, Ana Paiva|arXiv (Cornell University)|Apr 5, 2019

Social Robot Interaction and HRI参考文献 23被引用 3

一句话总结

本文提出了基于Nutty的机器人动画框架，通过建立12条机器人动画原则、可编程机器人动画引擎以及Nutty工作流程，弥合了传统角色动画与机器人技术之间的鸿沟。该框架使动画师能够通过可视化、基于模块的编程界面，设计出具有表现力、实时交互的机器人动作，无缝整合逆向运动学和用户追踪等程序化动画层，实现社交机器人在真实人机交互中的动态表现。

ABSTRACT

Robot animation is a new form of character animation that extends the traditional process by allowing the animated motion to become more interactive and adaptable during interaction with users in real-world settings. This paper reviews how this new type of character animation has evolved and been shaped from character animation principles and practices. We outline some new paradigms that aim at allowing character animators to become robot animators, and to properly take part in the development of social robots. One such paradigm consists of the 12 principles of robot animation, which describes general concepts that both animators and robot developers should consider in order to properly understand each other. We also introduce the concept of Kinematronics, for specifying the controllable and programmable expressive abilities of robots, and the Nutty Workflow and Pipeline. The Nutty Pipeline introduces the concept of the Programmable Robot Animation Engine, which allows to generate, compose and blend various types of animation sources into a final, interaction-enabled motion that can be rendered on robots in real-time during real-world interactions. The Nutty Motion Filter is described and exemplified as a technique that allows an open-loop motion controller to apply physical limits to the motion while still allowing to tweak the shape and expressivity of the resulting motion. Additionally, we describe some types of tools that can be developed and integrated into Nutty-based workflows and pipelines, which allow animation artists to perform an integral part of the expressive behaviour development within social robots, and thus to evolve from standard (3D) character animators, towards a full-stack type of robot animators.

研究动机与目标

• 通过将动画原则融入机器人技术，弥合传统角色动画师与机器人开发者之间的差距。
• 使动画师能够主动参与塑造社交机器人的交互式与表现性行为，突破以往在设计中仅作为被动角色的局限。
• 构建一个技术和概念并重的框架，支持真实世界中人机交互下的实时、富有表现力的机器人动画。
• 确立动画师作为“机器人动画师”的新角色，兼具艺术表现力与对机器人约束的理解。
• 开发支持基于用户交互与机器人运动学实时调整的动画组合、混合与运行时适应的工具与工作流程。

提出的方法

• 提出12条机器人动画原则，作为传统动画实践与机器人实现之间对齐的基础。
• 引入Nutty工作流程与管线，一种用于将多个动画源生成、组合并混合为单一实时动作输出的系统。
• 开发可编程机器人动画引擎（PRAE）作为核心组件，支持运行时动画混合与自适应。
• 提出Nutty运动滤波器技术，在保留表现力与动作形态的同时，为开环运动控制器施加物理限制。
• 设计基于视觉的、模块化的动画编辑器（Nutty Tracks），采用颜色编码信号与动画模块，实现对程序化动作层的直观编程。
• 将逆向运动学与用户追踪行为集成到动画管线中，支持基于实时输入的动态动作适应。

实验结果

研究问题

• RQ1 如何将传统角色动画原则适配于真实场景中，以实现富有表现力的交互式机器人动作？
• RQ2 为使动画师能够主动塑造和编程机器人行为（超越预录动作），需要哪些技术和工作流程的创新？
• RQ3 可编程动画引擎如何在尊重物理约束的前提下，支持多个动作源（如待机行为、面部追踪、IK）的实时混合？
• RQ4 何种界面范式能够使动画师在机器人背景下有效组合与调整复杂交互动画？
• RQ5 如何通过艺术家主导的、富有表现力的动画，在物理机器人中实现“生命感”，同时保持对实时人机交互的响应性？

主要发现

• 12条机器人动画原则为动画师与机器人工程师提供了共享的概念语言，促进相互理解与协作。
• Nutty管线通过整合多个动画源（包括逆向运动学与用户追踪等程序化层）生成单一、连贯的实时动作输出，实现了真正意义上的实时交互机器人动画。
• Nutty运动滤波器成功实现了开环运动控制器在尊重物理限制的同时保持动作表现力与形态，确保了机器人行为的安全性与自然性。
• Nutty Tracks可视化编辑器凭借其模块化、颜色编码的界面，使动画师能够创作并预览复杂、分层的动画，同时与机器人运动学及实时输入实现无缝集成。
• 该框架使动画师能够从传统3D角色动画转型为全栈机器人动画，主动塑造社交机器人中富有表现力的交互行为。
• 通过自定义脚本将动画工具集成至Unity3D等游戏引擎，显著扩展了该管线的可用性，并支持预可视化与迭代设计。