[论文解读] Flower Interaction Subsystem for a Precision Pollination Robot

Jared Strader, Jennifer Nguyen+9 more|arXiv (Cornell University)|Jun 21, 2019

Plant and animal studies参考文献 32被引用 4

一句话总结

本文提出了一套完全自主的机器人系统，配备专门的花朵交互子系统，可对单朵小型花朵实现精确授粉。该系统采用配备定制末端执行器和深度摄像头的机械臂，在高保真人工花朵上实现了93.1%的花朵检测准确率和76.9%的授粉成功率，展示了感知、位姿估计与受控操作在精准农业机器人中的创新集成。

ABSTRACT

Robotic pollinators not only can aid farmers by providing more cost effective and stable methods for pollinating plants but also benefit crop production in environments not suitable for bees such as greenhouses, growth chambers, and in outer space. Robotic pollination requires a high degree of precision and autonomy but few systems have addressed both of these aspects in practice. In this paper, a fully autonomous robot is presented, capable of precise pollination of individual small flowers. Experimental results show that the proposed system is able to achieve a 93.1% detection accuracy and a 76.9% 'pollination' success rate tested with high-fidelity artificial flowers.

研究动机与目标

• 应对授粉者减少和劳动力短缺带来的日益增长的精准农业机器人需求。
• 开发一种可在温室等受控环境中自主、精确地对单朵小型花朵进行授粉的系统。
• 通过整合高精度感知、位姿估计与受控操作，克服现有机器人授粉系统的局限性。
• 实现在不依赖蜜蜂或人工劳动情况下的可靠、可重复授粉，尤其适用于空间或生长舱等非传统环境。
• 为未来自动化其他植物特异性任务（如收获与表型分析）奠定基础。

提出的方法

• 利用配备KINOVA JACO 2机械臂和Intel RealSense D435深度摄像头的地面机器人（BrambleBee）实现环境感知。
• 在末端执行器上使用AruCo标记，以实现手眼标定，并精确估计柔性末端执行器相对于摄像头的位姿。
• 应用查找表进行逆运动学补偿，以应对末端执行器的柔性特性，从而实现精确的位姿控制。
• 通过图像处理与三维重建技术检测花朵，估计其三维位姿（位置与朝向），并映射工作空间中的障碍物。
• 实施规划与控制流程，考虑可达性约束并在运动过程中避免碰撞。
• 集成一种专为线性执行器设计的末端执行器，使其在精确对准后可伸出并接触花朵的花药。

实验结果

研究问题

• RQ1 完全自主的机器人系统是否能在受控环境中实现对单朵小型花朵的高精度授粉？
• RQ2 利用RGB-D传感与计算机视觉技术，对小型复杂花朵的检测与三维位姿估计能达到何种精度？
• RQ3 柔性末端执行器的运动学行为如何影响控制精度？是否可通过查找表实现补偿？
• RQ4 在自主花朵接触过程中，主要的故障模式是什么？位姿估计误差与“盲操作”对授粉成功率有何影响？
• RQ5 在非生物环境中，机器人系统在多大程度上能复现自然授粉者的精度？

主要发现

• 系统实现了93.1%的花朵检测准确率，正确识别了144朵人工花朵中的134朵，仅出现两次误报。
• 授粉成功率为76.9%，定义为成功接触花朵并使线性执行器伸出以触碰花药。
• 主要失败原因包括花朵朝向估计错误和在接近过程中因深度摄像头丢失目标而导致的“盲操作”。
• 在失败尝试中，末端执行器与花朵中心的偏差不超过2厘米，表明在保持跟踪时具备高定位精度。
• 位姿估计误差与视觉跟踪丢失被确定为导致授粉失败的主要原因。
• 该系统首次实现了完全自主与高精度操作在小型花朵授粉中的集成，为未来农业机器人系统设立了新基准。