[論文レビュー] Flower Interaction Subsystem for a Precision Pollination Robot

Jared Strader, Jennifer Nguyen+9 more|arXiv (Cornell University)|Jun 21, 2019

Plant and animal studies参考文献 32被引用数 4

ひとこと要約

本論文では、個々の小さな花の精密受粉を実現する専用の花接触サブシステムを備えた完全自律型ロボットシステムを提示する。ロボットアームにカスタムエンドエフェクタと深度カメラを装備することで、高精細な人工花において93.1%の花検出精度と76.9%の受粉成功率を達成した。これは、精密農業ロボティクス分野における、認識、ポーズ推定、制御された操作の統合の新しい事例を示している。

ABSTRACT

Robotic pollinators not only can aid farmers by providing more cost effective and stable methods for pollinating plants but also benefit crop production in environments not suitable for bees such as greenhouses, growth chambers, and in outer space. Robotic pollination requires a high degree of precision and autonomy but few systems have addressed both of these aspects in practice. In this paper, a fully autonomous robot is presented, capable of precise pollination of individual small flowers. Experimental results show that the proposed system is able to achieve a 93.1% detection accuracy and a 76.9% 'pollination' success rate tested with high-fidelity artificial flowers.

研究の動機と目的

• 受粉者減少と人的労働力不足への対応を目的とした、精密農業ロボティクスの需要増に応えること。
• 温室などの制御環境において、個々の小さな花の自律的で高精度な受粉を実現するシステムの開発。
• 既存のロボット受粉システムの限界を克服するため、高精度な認識、ポーズ推定、制御された操作を統合すること。
• ハチや人的労働に依存せず、宇宙や成長チャンバーなど非伝統的環境においても信頼性があり繰り返し可能な受粉を可能にすること。
• 将来的な植物固有タスク（収穫やフェノタイピングなど）の自動化の基盤を構築すること。

提案手法

• 環境認識に、BrambleBeeと呼ばれる地上型ロボットに、KINOVA JACO 2 ロボットアームとIntel RealSense D435深度カメラを搭載する。
• エンドエフェクタにAruCoマーカーを設置し、ハンド・イン・アイキャリブレーションを実施し、カメラからの相対的なエンドエフェクタの正確なポーズ推定を可能にする。
• エンドエフェクタの柔軟性を補償するため、逆運動学のためのルックアップテーブルを適用し、正確なポーズ制御を実現する。
• 画像処理と3次元再構成を用いて、花の検出、3次元ポーズ（位置と姿勢）の推定、作業空間内の障害物マップ作成を実施する。
• 到達可能性制約を考慮し、衝突を回避するように設計された計画と制御パイプラインを実装する。
• 正確な位置決め後に、線形アクチュエータを用いて花の雄しべに接触するよう設計されたカスタムエンドエフェクタを統合する。

実験結果

リサーチクエスチョン

• RQ1 完全自律型ロボットシステムは、制御環境下で個々の小さな花に対して高精度な受粉を達成できるか？
• RQ2 RGB-Dセンシングとコンピュータビジョンを用いた場合、小さな複雑な花の3次元ポーズの検出と推定にどの程度の精度が達成できるか？
• RQ3 柔軟なエンドエフェクタの運動学的挙動は制御精度にどのように影響するか？ また、ルックアップテーブルを用いることで補償可能か？
• RQ4 自律的花接触における主な失敗モードは何か？ ポーズ推定誤差と「目隠し走行（blind driving）」が受粉成功率に与える影響は？
• RQ5 非生物学的環境下で、ロボットシステムは自然の受粉者と同等の精度をどの程度再現できるか？

主な発見

• 本システムは、144個の人工花のうち134個を正しく検出し、誤検出は2例のみであったため、花検出精度が93.1%に達した。
• 受粉成功率は76.9%であった。これは、花に接触し、線形アクチュエータを展開して雄しべに接触した場合に定義される。
• 主な失敗要因は、花の姿勢推定の誤りと、深度カメラが花を認識できなくなった「目隠し走行」によるものであった。
• 失敗した場合でも、エンドエフェクタは花の中心から2 cm以内の誤差で位置を保っていたため、追跡が維持されている間は高い位置精度を示した。
• ポーズ推定誤差と視覚追跡の喪失が、受粉失敗の主な要因であると特定された。
• 本システムは、小型花受粉の完全自律化と高精度操作の統合を初めて実現した。今後の農業ロボティクスシステムのベンチマークを確立した。