[논문 리뷰] Augmented Reality-Based Advanced Driver-Assistance System for Connected Vehicles

Ziran Wang, Kyungtae Han외 1명|arXiv (Cornell University)|2020. 08. 31.

Traffic control and management참고 문헌 25인용 수 4

한 줄 요약

이 논문은 연결 차량을 위한 증강현실(AR)-기반 고도화된 운전자 보조 시스템(ADAS)을 제안하며, 슬롯 예약과 피드포워드/피드백 제어를 사용하여 무신호 교차로에서 협업 가이던스를 시각화한다. 이 시스템은 인간 운전 차량이 멈추지 않고 교차로를 통과하게 하여 유니티와 실제 운전자의 입력을 사용한 인간-중심 시뮬레이션에서 평균 주행 시간을 20% 감소시키고 연료 소비를 23.7% 감소시킨다.

ABSTRACT

With the development of advanced communication technology, connected vehicles become increasingly popular in our transportation systems, which can conduct cooperative maneuvers with each other as well as road entities through vehicle-to-everything communication. A lot of research interests have been drawn to other building blocks of a connected vehicle system, such as communication, planning, and control. However, less research studies were focused on the human-machine cooperation and interface, namely how to visualize the guidance information to the driver as an advanced driver-assistance system (ADAS). In this study, we propose an augmented reality (AR)-based ADAS, which visualizes the guidance information calculated cooperatively by multiple connected vehicles. An unsignalized intersection scenario is adopted as the use case of this system, where the driver can drive the connected vehicle crossing the intersection under the AR guidance, without any full stop at the intersection. A simulation environment is built in Unity game engine based on the road network of San Francisco, and human-in-the-loop (HITL) simulation is conducted to validate the effectiveness of our proposed system regarding travel time and energy consumption.

연구 동기 및 목표

• 연결 차량의 ADAS 인터페이스에서 인간 중심 설계의 부족을 해결하기 위해, 특히 협업 가이던스를 어떻게 시각화할 것인지에 중점을 둔다.
• AR를 통한 협업 차량 운행 시각화를 통해 인간 운전 차량이 무신호 교차로에서 안전하고 효율적이며 멈추지 않고 통과할 수 있도록 한다.
• 계획 및 제어 모듈을 AR HMI와 통합한 인간-기계 인터페이스를 개발하여 운전자의 이해도와 시스템의 사용성 향상을 도모한다.
• 유인턴 시뮬레이션을 통해 시스템의 효과성을 검증하여 주행 시간과 에너지 소비 감소를 확인한다.

제안 방법

• 시스템은 V2X 통신을 활용한 디지털 트윈 아키텍처를 사용하여 연결 차량(CAVs 및 인간 운전 차량) 간 실시간 조율을 가능하게 한다.
• 슬롯 예약 알고리즘은 무신호 교차로에 접근하는 차량들에게 충돌을 방지하고 원활한 통과를 보장하기 위해 시간 슬롯을 할당한다.
• 피드포워드/피드백 제어 알고리즘은 기준 차량과 예약된 슬롯을 기반으로 속도를 조절하여 안전한 차간 거리를 유지한다.
• AR HMI는 헤드업 디스플레이를 통해 운전자의 헤드업 뷰에 가이던스 신호(예: 속도 명령 및 경로 표시기)를 직접 오버레이한다.
• 유니티 게임 엔진을 사용하여 인간 참가자가 참여하는 샌프란시스코 도로 네트워크 시뮬레이션을 구현하여 시스템 성능을 평가했다.
• 시스템 평가에 주행 시간과 에너지 소비 지표를 사용하였으며, 연료 소비는 MOVESTAR 모델을 기반으로 추정하였다.

실험 결과

연구 질문

• RQ1 AR 기반 HMI는 어떻게 협업 차량 가이던스를 효과적으로 시각화하여 무신호 교차로에서 운전자의 이해도와 성능을 향상시킬 수 있는가?
• RQ2 슬롯 예약 메커니즘이 V2X 통신을 통해 무신호 교차로에서 다수의 차량이 멈추지 않고 조율된 방식으로 통과할 수 있는가?
• RQ3 AR 가이던스를 통한 협업 주행은 기존 신호등 제어 교차로에 비해 주행 시간과 에너지 소비를 얼마나 줄일 수 있는가?
• RQ4 피드포워드/피드백 제어를 AR HMI와 통합함으로써 혼합 교통 환경에서 안전성과 효율성이 어떻게 향상되는가?

주요 결과

• 제안된 AR 기반 ADAS는 인간-중심 시뮬레이션에서 기존 신호등 제어 교차로 대비 평균 주행 시간을 20% 감소시켰다.
• 시스템은 개방형 MOVESTAR 모델을 사용해 가솔린 차량의 연료 소비를 추정한 결과 평균 23.7% 감소를 달성했다.
• 피드포워드/피드백 제어 알고리즘이 안전한 차간 거리를 유지하는 데 성공했으며, NPC 차량이 에고 차량을 따라갈 경우 적절히 감속하는 것을 확인했다.
• 슬롯 예약은 교차로 단위로 동적으로 관리되었으며, 차량이 다음 링크에 진입할 때마다 새로운 슬롯을 할당받아 지속적인 조율이 가능했다.
• AR HMI는 인간 운전자가 교차로를 멈추지 않고 통과할 수 있도록 하여 안정적인 속도를 유지하고 전체 교통 효율성을 향상시켰다.
• 시스템은 인간 중심 설계된 ADAS—즉, 계획 및 제어가 HMI에 맞게 맞춤화된 것—가 사용성과 성능을 크게 향상시킬 수 있음을 입증했다.