[논문 리뷰] Autonomous Cooperative Wall Building by a Team of Unmanned Aerial Vehicles in the MBZIRC 2020 Competition

Baca, Tomas, Robert Pěnička외 5명|arXiv (Cornell University)|2020. 12. 10.

Robotic Path Planning Algorithms인용 수 9

한 줄 요약

이 논문은 MBZIRC 2020 대회에서 세 대의 UAV를 사용하여 자율적이고 협동적인 벽 쌓기 시스템을 제시한다. UAV들은 RGB-D 및 색채 영상 기반으로 경기장 스캔을 수행하고 브릭과 벽 구조를 탐지하며, 시각 설립 제어를 통해 정밀한 캐치와 배치를 수행한다. CTU-UPenn-NYU 팀은 총 17개의 브릭을 캐치한 가운데 10개를 성공적으로 배치하여 최고 점수인 8.24점 기록으로 모든 팀을 압도했다.

ABSTRACT

This paper presents a system for autonomous cooperative wall building with a team of Unmanned Aerial Vehicles (UAVs). The system was developed for Challenge 2 of the Mohamed Bin Zayed International Robotics Challenge (MBZIRC) 2020. The wall-building scenario of Challenge 2 featured an initial stack of bricks and wall structure where the individual bricks had to be placed by a team of three UAVs. The objective of the task was to maximize collected points for placing the bricks within the restricted construction time while following the prescribed wall pattern. The proposed approach uses initial scanning to find a priori unknown locations of the bricks and the wall structure. Each UAV is then assigned to individual bricks and wall placing locations and further perform grasping and placement using onboard resources only. The developed system consists of methods for scanning a given area, RGB-D detection of bricks and wall placement locations, precise grasping and placing of bricks, and coordination of multiple UAVs. The paper describes the overall system, individual components, experimental verification in demanding outdoor conditions, the achieved results in the competition, and lessons learned. The presented CTU-UPenn-NYU approach achieved the overall best performance among all participants to won the MBZIRC competition by collecting the highest number of points by correct placement of a high number of bricks.

연구 동기 및 목표

• 환경에 대한 사전 지식이 최소한인 조건에서 물리적 건설 작업을 수행하는 완전 자율적이고 협동적인 UAV 시스템 개발.
• 현장 센서와 실시간 제어를 활용한 정밀한 브릭 탐지, 캐치 및 배치 기능 제공.
• 시간 및 과제 제약 조건 하에 정해진 패턴에 따라 다중 UAV가 협동하여 벽을 쌓을 수 있는 제어 기반 확립.
• GPS 드리프트와 시각적 가림 등 동적인 외부 환경에서도 안정적인 성능 확보.
• 브릭 수거 및 배치 효율성 최적화를 통한 MBZIRC 2020 챌린지 2에서 최고 점수 확보.

제안 방법

• RGB-D 및 색채 카메라를 활용해 한 대의 UAV를 이용해 초기 경기장 스캔을 수행하여 브릭 스택과 벽 구조를 탐지.
• 반복 탐지에 대한 통계 분석을 통해 토폴로지 맵 구축하고, 반복 중앙값 필터링을 통한 가짜 탐지 제거.
• Wi-Fi 기반 맵 공유 및 브릭 스택과 벽 세그먼트에 대한 결정론적 할당을 통한 UAV 간 작업 분배.
• 캐치 시 실시간 고정밀도 최종 접근을 위한 시각 설립 제어 구현; 탐지 지연 ≤7 ms.
• 비행 단계를 관리하기 위해 상태 기계를 도입: GPS 항법, 시각 설립 제어, 캐치, 운반, 배치.
• 신뢰성과 정밀도 확보를 위해 배치 시 0.25 m/s의 감속 속도 적용; 실험적 시험을 통해 검증.

실험 결과

연구 질문

• RQ1 외부 환경에서 사전 지식이 최소한일 경우, UAV 팀이 어떻게 알려지지 않은 브릭 스택과 벽 구조를 자율적으로 탐지하고 정위치를 파악할 수 있는가?
• RQ2 동적인 비행 조건 하에서 안정적이고 실시간적인 브릭 탐지 및 정밀 캐치를 가능하게 하는 센서 융합 및 제어 기법은 무엇인가?
• RQ3 공유된 토폴로지 맵과 결정론적 작업 할당을 통해 다중 UAV 간 협업을 어떻게 달성하여 충돌을 방지하고 작업 부담을 최적화할 수 있는가?
• RQ4 실시간 시각 설립 제어 및 UAV 제어 과정에서 물리적 조작 과제 수행 시 주요 성능 저하 요인은 무엇인가?
• RQ5 현장 센서와 분산 제어 기반으로 GPS 장애 또는 GPS 드리프트 영향을 받는 환경에서도 높은 정밀도의 브릭 배치를 얼마나 잘 달성할 수 있는가?

주요 결과

• CTU-UPenn-NYU 팀은 MBZIRC 2020 챌린지 2에서 8.24점으로 최고 점수를 기록하며 두 번째로 높은 점수(1.33점)를 기록한 팀을 크게 앞서며 압도적인 성과를 거두었다.
• 두 차례의 25분 시험 동안 총 17개의 브릭을 캐치했으며, 그 중 10개가 벽 구조에 정확히 배치되었다.
• 시각 설립 제어를 통해 실시간 고정밀도 최종 접근이 가능했으며, 탐지 지연가 7 ms 이내로 유지되어 안정적인 캐치에 기여했다.
• 반복 중앙값 필터링 및 탐지 결과의 통계 분석을 통해 가짜 탐지 감소로 혼잡한 환경에서도 토폴로지 맵 정확도 향상.
• GPS 드리프트가 배치에 악영향을 미쳤지만, 팀은 경계 근처를 피하고 현장 센서를 활용한 국부 보정을 통해 위험을 완화했다.
• 시스템의 오픈소스 배포는 향후 로봇 건설 과제 및 산업 응용 분야에 대한 견고한 기반 자료 제공.