[논문 리뷰] Autonomous Vehicles that Interact with Pedestrians: A Survey of Theory and Practice

Amir Rasouli, John K. Tsotsos|arXiv (Cornell University)|2018. 05. 29.

Autonomous Vehicle Technology and Safety인용 수 27

한 줄 요약

이 종합 검토는 자율주행차(AV)와 보행자 간의 상호작용에 관한 이론적 및 실용적 연구를 종합하여, 인구통계학적 요소, 환경, 사회적 규범과 같은 핵심 행동 요인을 규명하고, 소통 방법 및 의도 예측 시스템을 평가한다. 이 연구는 다중모달 인식과 맥락 인식 기반 추론을 통해 AV가 보행자의 의도를 해석할 수 있는 통합적 프레임워크를 제안하며, 안전성 향상과 도시 환경에서의 사회적 수용을 위해 문화적으로 다양한 대규모 연구와 다중모달 소통 인터페이스의 필요성을 강조한다.

ABSTRACT

One of the major challenges that autonomous cars are facing today is driving in urban environments. To make it a reality, autonomous vehicles require the ability to communicate with other road users and understand their intentions. Such interactions are essential between the vehicles and pedestrians as the most vulnerable road users. Understanding pedestrian behavior, however, is not intuitive and depends on various factors such as demographics of the pedestrians, traffic dynamics, environmental conditions, etc. In this paper, we identify these factors by surveying pedestrian behavior studies, both the classical works on pedestrian-driver interaction and the modern ones that involve autonomous vehicles. To this end, we will discuss various methods of studying pedestrian behavior, and analyze how the factors identified in the literature are interrelated. We will also review the practical applications aimed at solving the interaction problem including design approaches for autonomous vehicles that communicate with pedestrians and visual perception and reasoning algorithms tailored to understanding pedestrian intention. Based on our findings, we will discuss the open problems and propose future research directions.

연구 동기 및 목표

• 도시 교통 환경에서 자율주행차(AV)와 관련된 보행자 행동에 대한 통합적 이해의 격차를 해소하기 위해.
• 인구통계학, 환경 조건, 사회적 규범과 같은 상호작용 요인들이 보행자 횡단 결정에 미치는 영향을 규명하고 분석하기 위해.
• 다양한 모odal의 효과성과 설계 원칙을 중점으로, 현재 AV가 보행자와 소통하는 시스템을 평가하기 위해.
• 기존의 보행자 의도 추정 알고리즘의 한계를 평가하고 맥락 인식 및 다중모달 데이터 통합을 통해 개선 방안을 제안하기 위해.
• 사회적으로 지능적인 AV가 보행자와 안전하고 신뢰할 수 있게 상호작용할 수 있도록 하기 위한 열린 연구 문제와 향후 방향성의 개요를 제시하기 위해.

제안 방법

• 보행자 행동에 관한 고전적 및 현대적 연구를 체계적으로 검토한 바탕으로, 설문 조사, 관찰 연구, 현장 실험을 포함한다.
• 이전 연구를 분류하고 시각화하여 문화, 주의력, 교통 역학성과 같은 행동 요인 간의 상호관계를 맵핑한다.
• V2P, LED 디스플레이, 프로젝터를 활용한 AV 소통 시스템을 분석하여 다양한 모달 간의 효과성을 평가한다.
• 시각적 인식, 장면 이해, 맥락 기반 추론에 기반한 의도 추정 알고리즘을 평가하며, 다양한 훈련 데이터의 필요성을 강조한다.
• 시각적 신호, 사회적 규범, 환경적 맥락을 통합하여 AV가 보행자 의도를 해석할 수 있는 통합 프레임워크를 구축한다.
• 현재 연구에서의 방법론적 한계, 예를 들어 작은 표본 크기와 문화적 다양성 부족을 규명하여 향후 연구 설계를 안내한다.

실험 결과

연구 질문

• RQ1 보행자 횡단 행동에 영향을 미치는 인구통계학적 요소, 환경 조건, 사회적 규범이 어떻게 상호작용하는가?
• RQ2 AV가 보행자에게 의도를 전달하기 위해 가장 효과적인 소통 모달은 무엇인가?
• RQ3 시각적 인식과 맥락 기반 추론을 통해 AV는 어떻게 보행자의 의도를 정확히 예측할 수 있는가?
• RQ4 기존의 의도 추정 알고리즘이 다양한 도시 교통 환경에서 일반화되지 못하는 이유는 무엇인가?
• RQ5 AV-보행자 상호작용 분야에서 향후 연구가 필요한 주요 열린 문제들은 무엇인가?

주요 결과

• 보행자 행동은 문화적 규범, 인구통계학적 요소, 환경 조건에 의해 크게 영향을 받으며, 이러한 요소들 사이에 강한 상호의존성이 존재한다.
• 현재 AV 소통 시스템은 종종 다중모달 평가가 부족하고, 작은 비대표적 표본에서 테스트되기 때문에 실제 도로 환경 적용에 한계가 있다.
• 의도 추정 알고리즘은 종종 맥락 정보를 통합하지 못하고 제한된 또는 시나리오 기반 데이터에 의존하여, 복잡한 도시 환경에서의 신뢰성과 내구성을 저하시킨다.
• 현재 연구가 작은 표본 크기와 방법론적 일관성 부족으로 어려움을 겪기 때문에, AV 설계에 기초가 되는 대규모이고 문화적으로 다양한 행동 연구가 절실하게 필요하다.
• AV가 다이나믹한 교통 환경에서 보행자의 행동을 정확히 예측하기 위해서는 시각적 신호, 장면 이해, 사회적 추론의 통합이 필수적이다.
• 향후 AV 시스템은 보행자를 단순한 동적 물체로 간주하는 데서 벗어나, 의도, 감정, 맥락 인식 능력을 지닌 사회적 에이전트로 모델링해야 한다.