[논문 리뷰] A Review of Driver Drowsiness Detection Systems: Techniques, Advantages and Limitations

Ismail Nasri, Mohammed Karrouchi외 2명|arXiv (Cornell University)|2022. 05. 22.

Sleep and Work-Related Fatigue인용 수 13

한 줄 요약

이 논문은 생리적 신호, 얼굴 특징, 주행 패턴을 이용한 운전자 졸림 감지 시스템을 검토하며, 정확도, 신뢰성, 하드웨어 요구사항, 침습성 등을 평가한다. 연구 결과, 다수의 기법을 조합한 하이브리드 시스템이 각 기법의 장점을 살리고 개별적 한계를 보완함으로써 우수한 내구성, 정확도, 실시간 성능을 제공함을 확인하였다.

ABSTRACT

Driver Drowsiness is one of the most factors of road accidents, leading to severe injuries and deaths every year. Drowsiness means difficulty staying awake, which can lead to falling asleep. This paper introduces a literature review of driver drowsiness detection systems based on an analysis of physiological signals, facial features, and driving patterns. The paper also presents and details the recently proposed techniques for each class. We have also provided a comparative study of recently published works regarding the accuracy, reliability, hardware requirement, and intrusiveness. We have summarized and discussed the advantages and limitations of each class. As a result, each class of techniques has advantages and limitations. A hybrid system that combines two and more techniques will be efficient, robust, accurate, and used in real-time to take advantage of each technique.

연구 동기 및 목표

• 생리적 신호, 얼굴 특징, 주행 행동을 기반으로 한 기존 운전자 졸림 감지 시스템을 분석하고 비교하기.
• 각 감지 기법의 정확도, 신뢰성, 하드웨어 요구사항, 침투성 평가하기.
• 실생활 적용에서 단일 모odal 시스템의 장점과 한계 식별하기.
• 성능 향상을 위해 다수의 감지 기법을 융합한 하이브리드 접근법 제안하기.
• 향후 연구가 내구성 있고 정확하며 실시간 동작이 가능한 졸림 감지 시스템으로 이어지도록 안내하기.

제안 방법

• 2022년 이전에 발표된 졸림 감지 시스템 관련 최근 논문들을 체계적으로 검토하는 연구를 수행하였다.
• 기법은 주로 세 가지 유형으로 분류된다: 생리적 신호 기반, 얼굴 특징 기반, 주행 패턴 기반 감지.
• 정확도, 신뢰성, 하드웨어 복잡도, 사용자 침투성 등의 성능 지표를 바탕으로 각 유형을 분석하였다.
• 최근 연구들을 대비하여 감지 방법 간의 상호 교환 관계를 평가하기 위해 비교 분석을 수행하였다.
• 다양한 기법을 융합하여 전체 성능을 향상시키기 위한 하이브리드 시스템의 구현 가능성 평가하였다.
• 눈 감힘 감지, 머리 자세 추정, 뇌파/심전도 신호 처리, 차량 운동 모델링 등의 핵심 구성 요소에 대한 논의가 포함되었다.

실험 결과

연구 질문

• RQ1 생리적 신호, 얼굴 특징, 주행 행동을 기반으로 한 운전자 졸림 감지 시스템에서 주로 사용되는 기법은 무엇인가?
• RQ2 최근 연구들을 바탕으로 각 감지 방법의 정확도, 신뢰성, 하드웨어 요구사항, 침투성은 어떻게 비교되는가?
• RQ3 단일 모달 감지 시스템의 핵심 장점과 한계는 무엇인가?
• RQ4 다양한 감지 기법을 융합한 하이브리드 시스템이 개별 기법보다 뛰어난 성능을 달성할 수 있는가?
• RQ5 실시간으로 작동하며 내구성 있고 정확한 졸림 감지 시스템을 개발하기 위해 고려해야 할 주요 설계 요소는 무엇인가?

주요 결과

• 뇌파(EEG) 또는 심전도(ECG)를 활용한 생리적 신호 기반 시스템은 높은 정확도를 보이지만, 전용으로 설계된 침투성이 높은 센서와 복잡한 신호 처리가 필요하다.
• 눈 감힘과 머리 자세를 기반으로 한 얼굴 특징 기반 시스템은 비침투성이며 실시간 모니터링에 효과적이지만, 조도 및 가림 요건에 영향을 받을 수 있다.
• 주행 패턴 기반 시스템은 비침투성이며 차량 텔레메트리 데이터를 사용하지만, 졸림의 초기 단계를 감지하는 데 민감도가 떨어질 수 있다.
• 단일 기법은 정확도, 하드웨어 요구사항, 사용자 편안함의 모든 기준에서 최적의 성능을 달성하지 못하며, 각각 고유한 상충 관계를 지닌다.
• 최소 두 가지 기법을 융합한 하이브리드 시스템은 개별 기법의 한계를 상쇄함으로써 내구성, 정확도, 실시간 처리 능력 향상에 기여한다.
• 다양한 모odal을 융합하는 것이 실생활 주행 조건에서 신뢰성 있고 확장 가능하며 실용적인 졸림 감지 시스템을 구현하기 위한 가장 유망한 방향으로 확인되었다.