[논문 리뷰] Sensors and Systems for Monitoring Mental Fatigue: A systematic review

Prabin Sharma, Joanna C. Justus외 2명|arXiv (Cornell University)|2023. 07. 04.

Sleep and Work-Related FatiguePsychology인용 수 3

한 줄 요약

이 체계적 리뷰는 정신적 피로 모니터링을 위한 생체센서 기반 시스템을 평가하며, 주로 뇌파(EEG) 및 환경 센서에 초점을 맞춘다. 연구 결과, EEG 기반 시스템은 피로 감지에 중간 수준에서 양호한 민감도를 보이며, 고밀도 EEG의 경우 추가적인 이점이 없음을 확인했고, 이는 운전 및 온라인 학습과 같은 분야에서 실생활 적용을 위한 통합형 웨어러블 및 환경 센서 시스템의 필요성을 강조한다.

ABSTRACT

Mental fatigue is a leading cause of motor vehicle accidents, medical errors, loss of workplace productivity, and student disengagements in e-learning environment. Development of sensors and systems that can reliably track mental fatigue can prevent accidents, reduce errors, and help increase workplace productivity. This review provides a critical summary of theoretical models of mental fatigue, a description of key enabling sensor technologies, and a systematic review of recent studies using biosensor-based systems for tracking mental fatigue in humans. We conducted a systematic search and review of recent literature which focused on detection and tracking of mental fatigue in humans. The search yielded 57 studies (N=1082), majority of which used electroencephalography (EEG) based sensors for tracking mental fatigue. We found that EEG-based sensors can provide a moderate to good sensitivity for fatigue detection. Notably, we found no incremental benefit of using high-density EEG sensors for application in mental fatigue detection. Given the findings, we provide a critical discussion on the integration of wearable EEG and ambient sensors in the context of achieving real-world monitoring. Future work required to advance and adapt the technologies toward widespread deployment of wearable sensors and systems for fatigue monitoring in semi-autonomous and autonomous industries is examined.

연구 동기 및 목표

• 정신적 피로의 이론적 모델을 비판적으로 평가하고, 센서 기반 모니터링에의 적용 가능성을 검토한다.
• 실시간으로 정신적 피로를 추적하기 위한 핵심 기반 기술, 특히 EEG와 같은 생체센서를 포함한 센서 기술을 식별하고 분석한다.
• 다양한 환경에서 정신적 피로를 감지하는 데 있어 기존 생체센서 기반 시스템의 성능과 한계를 평가한다.
• 웨어러블 및 환경 센서 시스템을 지속적이고 실생활에서의 정신적 피로 모니터링에 구현할 수 있는 가능성과 과제를 검토한다.
• 반자율 및 자율 주행 산업 등 광범위한 도입을 위한 향후 연구 방향을 규명한다.

제안 방법

• 최근 몇 년 간 발표된 논문을 중심으로 학술 데이터베이스를 대상으로 체계적인 문헌 검색을 수행하였다.
• 생체센서를 활용한 정신적 피로 감지에 초점을 맞춘 57개의 연구(N=1082명의 참가자)를 선별하였다. 주로 EEG 기반 시스템에 초점을 맞췄다.
• 웨어러블 및 환경 센서를 포함한 실생활 적용 가능성, 신호 품질, 사용성 기준으로 센서 기술을 평가하였다.
• 다양한 연구에서 피로 감지의 민감도, 특이도, 정확도 등의 성능 지표를 분석하였다.
• 고밀도 EEG 시스템과 표준 EEG 시스템 간의 비교 효과성을 종합적으로 분석하였다.
• 실생활 환경에서의 시스템 통합, 확장성, 구현 과제에 대한 비판적 논의를 제공하였다.

실험 결과

연구 질문

• RQ1 실생활 환경에서 정신적 피로를 감지하는 데 가장 효과적인 센서 기술은 무엇인가?
• RQ2 특히 고밀도 EEG와 표준 EEG 설정 간의 비교에서 EEG 기반 시스템의 성능은 어떻게 달라지나?
• RQ3 다양한 적용 분야에서 현재의 생체센서 기반 시스템이 정신적 피로 모니터링에 있어 겪는 주요 한계는 무엇인가?
• RQ4 웨어러블 센서와 환경 센서를 어떻게 통합하여 지속적이고 비침습적인 정신적 피로 모니터링을 향상시킬 수 있는가?
• RQ5 반자율 및 자율 주행 산업에서 피로 모니터링 시스템의 광범위한 배포를 가능하게 하기 위해 필요한 향후 연구는 무엇인가?

주요 결과

• EEG 기반 센서는 실시간 모니터링에 적합한 중간 수준에서 양호한 민감도를 보이며, 정신적 피로 감지에 실용적인 선택지로 활용 가능하다.
• 고밀도 EEG 센서는 표준 EEG 시스템에 비해 정신적 피로 감지에 추가적인 이점을 보이지 않아, 단순한 구성이 비용 대비 성능 측면에서 유리함을 시사한다.
• 검토된 대부분의 연구(N=1082명의 참가자)는 EEG를 사용하여, 생체신호 기반 피로 추적의 주요 모odalities로써 EEG의 우세함을 보여준다.
• 통제된 환경에서는 뛰어난 성능를 보였지만, 환경적 노이즈와 사용자 간 변동성으로 인해 실생활 환경에 시스템을 구현하는 데 여전히 큰 과제가 존재한다.
• 웨어러블 EEG와 환경 센서의 통합은 일상 환경에서 지속적이고 비침습적이며 신뢰할 수 있는 피로 모니터링을 가능하게 하는 유망한 접근법으로 확인되었다.
• 향후 연구는 시스템의 내구성, 확장성, 그리고 운전 및 의료 분야 등 고위험 분야에서의 적용을 위한 적응 가능성 향상에 초점을 맞춰야 한다.