[논문 리뷰] Flower Interaction Subsystem for a Precision Pollination Robot

Jared Strader, Jennifer Nguyen외 9명|arXiv (Cornell University)|2019. 06. 21.

Plant and animal studies참고 문헌 32인용 수 4

한 줄 요약

이 논문은 개별적인 작은 꽃에 대한 정밀 수분을 위한 특수 설계된 꽃 상호작용 서브시스템을 갖춘 완전 자율 로봇 시스템을 제시한다. 맞춤형 종단 효과기와 깊이 카메라를 장착한 로봇 팔을 사용하여, 고성능 인공 꽃에서 93.1%의 꽃 탐지 정확도와 76.9%의 수분 성공률을 달성하였으며, 정밀 농업 로봇 분야에서 감지, 자세 추정 및 제어된 조작의 새로운 통합을 입증한다.

ABSTRACT

Robotic pollinators not only can aid farmers by providing more cost effective and stable methods for pollinating plants but also benefit crop production in environments not suitable for bees such as greenhouses, growth chambers, and in outer space. Robotic pollination requires a high degree of precision and autonomy but few systems have addressed both of these aspects in practice. In this paper, a fully autonomous robot is presented, capable of precise pollination of individual small flowers. Experimental results show that the proposed system is able to achieve a 93.1% detection accuracy and a 76.9% 'pollination' success rate tested with high-fidelity artificial flowers.

연구 동기 및 목표

• 수분자 감소와 노동력 부족에 대비해 정밀 농업 로봇 기술의 증가하는 수요를 충족시키기 위해.
• 온실과 같은 통제된 환경에서 개별적인 작은 꽃에 대해 자율적이고 정밀한 수분을 수행할 수 있는 시스템을 개발하기 위해.
• 기존 로봇 수분 시스템의 한계를 극복하기 위해 고정밀 감지, 자세 추정 및 제어된 조작을 통합하기 위해.
• 특히 우주나 성장 캐비닛과 같은 비전통적 환경에서 벌이나 수동 노동에 의존하지 않고 신뢰성 있고 반복 가능한 수분을 가능하게 하기 위해.
• 향후 수확 및 형질 분석과 같은 식물 전용 작업의 자동화 기반을 마련하기 위해.

제안 방법

• 환경 감지를 위해 KINOVA JACO 2 로봇 팔과 Intel RealSense D435 깊이 카메라를 장착한 지상 로봇(BrambleBee)을 사용한다.
• 종단 효과기 상에 AruCo 마커를 사용하여 눈-손 캘리브레이션을 수행하고 카메라 대비 탄성 종단 효과기의 정밀 자세 추정을 가능하게 한다.
• 탄성 종단 효과기의 특성을 보완하기 위해 역기구학을 위한 룩업 테이블을 적용하여 정확한 자세 제어를 실현한다.
• 이미지 처리와 3D 재구성을 통해 꽃을 탐지하고, 그들의 3D 자세(위치 및 방향)를 추정하며 작업 영역 내 장애물을 매핑한다.
• 접근 가능 범위 제약 조건을 고려하고 충돌을 피하는 동안의 움직임을 제어하기 위한 계획 및 제어 파이프라인을 구현한다.
• 정밀한 위치 조절 후에 암술에 도달하기 위해 선형 액추에이터를 이용해 연장 및 접촉할 수 있도록 특수 설계된 종단 효과기를 통합한다.

실험 결과

연구 질문

• RQ1 완전 자율 로봇 시스템이 통제된 환경에서 개별적인 작은 꽃에 대해 고정밀 수분을 수행할 수 있는가?
• RQ2 RGB-D 센싱과 컴퓨터 비전을 사용할 때, 작은 복잡한 꽃의 3D 자세 탐지 및 추정 정확도는 어느 정도 달성될 수 있는가?
• RQ3 탄성 종단 효과기의 기구학적 행동이 제어 정밀도에 영향을 주는가? 그리고 룩업 테이블을 통해 이를 보완할 수 있는가?
• RQ4 자율 꽃 접촉에서 주요 실패 원인은 무엇이며, 자세 추정 오류와 '시야 없는 주행'이 수분 성공률에 어떤 영향을 미치는가?
• RQ5 비생물학적 환경에서 로봇 시스템이 자연 수분자만큼 정밀도를 재현할 수 있는 정도는 어느 정도인가?

주요 결과

• 시스템은 93.1%의 꽃 탐지 정확도를 달성하여 144개의 인공 꽃 중 134개를 정확히 식별하였으며, 오직 두 건의 오진 양성만 발생하였다.
• 수분 성공률은 76.9%였으며, 이는 꽃에 성공적으로 접촉하고 선형 액추에이터를 통해 암술에 도달하는 것으로 정의되었다.
• 주요 실패 원인은 잘못된 꽃 자세 추정과, 깊이 카메라가 꽃을 시각적으로 상실한 '시야 없는 주행'이었다.
• 실패한 경우에도 종단 효과기는 꽃 중심에서 최대 2cm 이내로 위치를 유지하였으며, 이는 추적 유지 시 높은 위치 정밀도를 보여주었다.
• 자세 추정 오류와 시각 추적 상실이 수분 실패 시도의 주요 원인로 규명되었다.
• 이 시스템은 소형 꽃 수분을 위한 완전 자율성과 고정밀 조작의 통합을 처음으로 실현하였으며, 향후 농업용 로봇 시스템의 기준을 설정하였다.