[论文解读] Tool Macgyvering: A Novel Framework for Combining Tool Substitution and Construction

Lakshmi Nair, Nithin Shrivatsav Srikanth+1 more|arXiv (Cornell University)|Aug 24, 2020

Manufacturing Process and Optimization参考文献 38被引用 4

一句话总结

该论文提出了一种新颖的工具巧手化（Tool Macgyvering）框架，通过仲裁机制统一了工具替代与构建，利用形状、材质和连接方式的推理，自主实现工具的创造或替代。该系统在构建功能性工具方面达到96.67%的准确率，在替代与构建之间的仲裁决策中达到83.33%的准确率，通过整合材质推理与基于直接比较的仲裁策略，显著优于以往方法。

ABSTRACT

Macgyvering refers to solving problems inventively by using whatever objects are available at hand. Tool Macgyvering is a subset of macgyvering tasks involving a missing tool that is either substituted (tool substitution) or constructed (tool construction), from available objects. In this paper, we introduce a novel Tool Macgyvering framework that combines tool substitution and construction using arbitration that decides between the two options to output a final macgyvering solution. Our tool construction approach reasons about the shape, material, and different ways of attaching objects to construct a desired tool. We further develop value functions that enable the robot to effectively arbitrate between substitution and construction. Our results show that our tool construction approach is able to successfully construct working tools with an accuracy of 96.67%, and our arbitration strategy successfully chooses between substitution and construction with an accuracy of 83.33%.

研究动机与目标

• 通过使机器人能够利用现有物体自主进行工具即兴创造，提升其适应能力。
• 解决以往工具构建方法忽略材质特性导致工具无法使用的问题。
• 开发一个统一的框架，用于在工具替代与构建之间进行仲裁，以获得最优的巧手化解决方案。
• 提升机器人在非结构化环境中进行工具即兴创造的性能与可靠性。
• 通过7-DOF机械臂自主构建工具以及人工评估的仲裁决策，对框架进行验证。

提出的方法

• 该框架采用独立的形状、材质和连接评分机制进行工具构建，使机器人能够推理物体之间的兼容性与功能性。
• 通过评估物体的刚度、耐久性等物理属性，将材质推理整合到工具构建过程中，确保功能性工具的创建。
• 工具替代通过联合形状与材质评分来实现，以识别最合适的可用物体作为缺失工具的替代品。
• 通过直接比较复合评分来执行替代与构建之间的仲裁，优于基于规则或间接比较的策略。
• 系统利用RGB-D传感器捕获物体的局部点云，并通过几何与物理推理评估潜在的工具配置。
• 该框架在7-DOF机械臂上进行评估，使用形状与材质多样的物体，测试六种不同类型的工具。

实验结果

研究问题

• RQ1 与仅依赖形状的方法相比，材质推理是否能显著提高机器人工具构建的成功率？
• RQ2 直接比较复合评分在工具替代与构建之间的仲裁中有多高效？
• RQ3 整合形状、材质与连接推理对所构建工具的多样性与功能性有何影响？
• RQ4 在真实世界的巧手化场景中，该仲裁策略与基于规则或间接比较的方法相比表现如何？
• RQ5 该系统在保持高构建准确率的同时，能在多大程度上减少探索的配置空间？

主要发现

• 该工具构建方法在创建功能性工具方面达到了96.67%的成功率，显著优于以往方法仅实现27%和60%的完成率。
• 整合材质推理有效减少了非功能性工具（如泡沫锤）的产生，提高了所构建工具的可靠性与实用性。
• 基于直接比较评分的仲裁策略在83.33%的测试案例中正确选择了最佳巧手化方案（替代或构建），优于基于规则和替代的基线方法。
• 该系统仅探索了总可能配置空间的5.72%，展示了在大规模组合空间中高效搜索的能力。
• 表现最佳的框架设计结合了构建时独立的形状、材质与连接评分，替代时联合的形状与材质评分，以及直接比较的仲裁机制。
• 人工评估确认，直接比较仲裁策略与真实偏好最相符，验证了其在现实决策中的有效性。