[论文解读] Human-Supervised Semi-Autonomous Mobile Manipulators for Safely and Efficiently Executing Machine Tending Tasks

Sarah Al-Hussaini, Shantanu Thakar+5 more|arXiv (Cornell University)|Oct 10, 2020

Robot Manipulation and Learning被引用 6

一句话总结

本论文提出 ADAMMS 2.0，一种由人类监督的半自主移动操作臂，能够从高层任务描述生成由人工智能驱动的运动规划，并在人类批准前进行仿真，从而实现在小批量制造环境中的安全高效机器操作。非专家操作员在经过极少培训后，平均仅用18分钟即可完成任务，表明该系统凭借其直观的界面和可达性引导，具有出色的可用性与快速学习能力。

ABSTRACT

Mobile manipulators can be used for machine tending and material handling tasks in small volume manufacturing applications. These applications usually have semi-structured work environment. The use of a fully autonomous mobile manipulator for such applications can be risky, as an inaccurate model of the workspace may result in damage to expensive equipment. On the other hand, the use of a fully teleoperated mobile manipulator may require a significant amount of operator time. In this paper, a semi-autonomous mobile manipulator is developed for safely and efficiently carrying out machine tending tasks under human supervision. The robot is capable of generating motion plans from the high-level task description and presenting simulation results to the human for approval. The human operator can authorize the robot to execute the automatically generated plan or provide additional input to the planner to refine the plan. If the level of uncertainty in some parts of the workspace model is high, then the human can decide to perform teleoperation to safely execute the task. Our preliminary user trials show that non-expert operators can quickly learn to use the system and perform machine tending tasks.

研究动机与目标

• 为解决在小批量制造环境中完全自主或完全远程操控的移动操作臂所面临的局限性，结合安全性与效率。
• 通过智能运动规划与人机协同验证，减轻操作员在机器操作任务中的工作负荷与认知负荷。
• 通过整合视觉反馈、仿真与可达性引导，提升非专家操作员的系统可用性。
• 通过混合远程操控与自主规划，使单个远程操作员能够跨设施监督多台移动操作臂。
• 开发一种能够根据环境不确定性与风险评估动态在自主规划与远程操控之间切换的系统。

提出的方法

• 系统采用基于人工智能的运动规划，从高层任务描述生成移动基座与机械臂的轨迹。
• 运动规划在三维环境中进行仿真，并呈现给人类操作员进行审批或调整。
• 若风险较低，操作员可授权自主执行；若不确定性较高，则可切换至远程操控。
• 集成可达性图以指导最优移动基座位置，提升任务效率。
• 系统在三维界面中提供实时视觉反馈，帮助操作员评估夹爪与目标物的对齐情况及碰撞风险。
• 混合控制模式允许根据操作员判断，无缝切换自主规划与手动远程操控。

实验结果

研究问题

• RQ1 在半结构化制造环境中，移动操作臂系统如何在自主性与人工监督之间取得平衡，以确保安全性？
• RQ2 非专家操作员在多大程度上能够学会使用半自主移动操作臂系统完成机器操作任务？
• RQ3 仿真与人工审批的整合在多大程度上提升了自主运动规划的可靠性与安全性？
• RQ4 哪些设计特性显著缩短了新手操作员的任务完成时间？
• RQ5 该系统如何处理工作空间建模中的不确定性，以防止与昂贵设备发生碰撞？

主要发现

• 非专家操作员在首次尝试时平均用时24分钟完成机器操作任务，第二次尝试后缩短至18分钟，仅经过少量经验积累。
• 显著缩短任务时间的主要因素是：对最优移动基座位置的更好理解，以及对夹爪与目标物对齐情况的更佳视觉评估。
• 系统表现出极强的可用性，操作员能够快速掌握图形用户界面，并有效利用仿真反馈做出决策。
• 可达性图的集成显著提升了操作员的决策能力，明确标识出可执行任务的有效基座位置。
• 混合操作模式有效平衡了自主性与人工监督，在模型存在不确定性时仍能确保安全执行。
• 初步试验表明，通过计划仿真进行人工监督可降低碰撞风险，同时保持操作效率。