[논문 리뷰] Human-Drone Interactions with Semi-Autonomous Cohorts of Collaborating Drones

Jane Cleland‐Huang, A.K. Agrawal|arXiv (Cornell University)|2020. 10. 08.

Evacuation and Crowd Dynamics참고 문헌 4인용 수 5

한 줄 요약

이 논문은 다수의 인간과 준자율 드론 군집을 포함하는 재난 대응 상황에서 인간-드론 협업을 위한 프레임워크를 제안한다. H2D, D2H, D2D, H2H 채널 간의 다중 모odal 상호작용 모델을 도입하며, 상황 인식 기능과 동적 드론 자기 설명 기능을 갖춘 GUI를 통해 임무 조율을 지원하고, 그래픽 및 물리적 인터페이스 간의 제어 전환 과제를 해결한다.

ABSTRACT

Research in human-drone interactions has primarily focused on cases in which a person interacts with a single drone as an active controller, recipient of information, or a social companion; or cases in which an individual, or a team of operators interacts with a swarm of drones as they perform some coordinated flight patterns. In this position paper we explore a third scenario in which multiple humans and drones collaborate in an emergency response scenario. We discuss different types of interactions, and draw examples from current DroneResponse project.

연구 동기 및 목표

• 단일 드론 제어나 군집 조율을 초월하여 다수의 인간과 다수의 드론을 포함하는 재난 대응 시나리오에 초점을 맞춘 인간-드론 상호작용 연구의 격차를 해소하기 위해.
• 투명한 드론 행동 설명과 환경적 맥락 시각화를 통해 상황 인식을 지원하는 시스템을 설계하기 위해.
• 작업 위임, 상태 보고, 불확실성 하에서의 동적 의사결정을 포함한 인간과 드론 간의 双방향 통신을 가능하게 하기 위해.
• 고위험 재난 운영 상황에서 그래픽 사용자 인터페이스와 물리적 원격 조종 장치 간의 제어 전환 과정에서 발생하는 과제를 조사하기 위해.
• 비기술자 대응자도 접근 가능한 동시에 형식화 가능한 인터페이스를 제공하는 임무 사양 인터페이스를 공동 설계하기 위해.

제안 방법

• 환경적 요인(예: 저조도, 강풍 등)이 드론 행동에 미치는 영향을 시각화하는 드론응답 시스템의 그래픽 사용자 인터페이스(GUI)를 개발하였다.
• 사용자 요청 시 드론이 현재 비행 전략과 결정을 설명할 수 있는 자기 설명 메커니즘을 구현하였으며, 예를 들어 저조도로 인해 낮게 비행 중임을 설명하였다.
• '누가, 무엇을, 어디서, 어떻게'의 차원을 고려해 설정 가능한 단추의 플로우차트를 사용하여 임무 사양 인터페이스를 설계하였다.
• 임무 계획을 공식적으로 표현하기 위해 신념-욕망-의도(Belief-Desire-Intention, BDI) 모델을 통합하여 드론이 고수준 지시를 해석하고 실행할 수 있도록 하였다.
• GUI 기반 및 물리적 조종 장치 기반 운영 방식을 비교하여 하이브리드 제어 모드를 탐색하였으며, 제어 모드 전환 시 발생할 수 있는 일치하지 않는 상태의 위험을 규명하였다.
• 물리적 조종 장치의 입력(예: '앞으로')을 운영자 시점에서 드론의 방향에 맞게 재정렬하는 기능을 제안하여 조종사의 방향 혼동을 줄이고 제어 정확도를 향상시켰다.

실험 결과

연구 질문

• RQ1 준자율 드론을 포함한 다수의 사용자와 다수의 드론이 참여하는 재난 대응 상황에서 인간-드론 상호작용을 효과적으로 구조화할 수 있는 방법은 무엇인가?
• RQ2 부분 자율적으로 운영되는 드론이 있을 때, 인간 운영자가 상황 인식을 유지하기 위해 필수적인 정보 유형은 무엇인가?
• RQ3 드론이 인간 운영자에게 실시간으로 의사결정 과정과 행동 적응 과정을 어떻게 통신할 수 있는가?
• RQ4 재난 드론 운영에서 그래픽 인터페이스와 물리적 제어 인터페이스 간 전환 과정에서 발생하는 과제는 무엇인가?
• RQ5 직관적이면서도 형식화 가능한 인터페이스를 통해 인간과 드론 간에 임무 지시를 의미적으로 어떻게 구조화하고 전달할 수 있는가?

주요 결과

• 드론응답 GUI는 저조도, 강풍과 같은 환경적 요인을 성공적으로 시각화하여 운영자가 드론이 비행 파rameter를 조정한 이유를 이해하는 데 기여하였다.
• 자신의 행동을 설명한 드론(예: '저조도로 인해 낮게 비행 중')은 운영자 신뢰도와 상황 이해도를 크게 향상시켰다.
• 지역 소방대와 함께 진행한 4개월 간의 공동 설계 과정에서 실시간 재난 대응 상황에서 맥락 인식과 즉각적인 설명 기능이 필요하다는 점이 확인되었다.
• GUI 상태와 물리적 조종 장치 상태 간의 일치하지 않는 현상은 운영 리스크를 유발하였으며, 소프트웨어에서 수동 제어로 전환하는 과정에서 UAV가 추락한 사례를 통해 인터페이스 일관성의 중요성을 확인하였다.
• 임무 사양을 위한 플로우차트 기반 GUI는 비기술자 사용자가 '누가, 무엇을, 어디서, 어떻게'의 구조적 파rameter를 사용해 복잡한 지시를 정의하는 데에 효과적임을 입증하였다.
• 수동 제어 시 드론을 조종사의 시점에 맞게 재정렬함으로써 방향 혼동을 줄이고 제어 정확도를 향상시켰다.