[논문 리뷰] Understanding EEG signals for subject-wise Definition of Armoni Activities

Kislay Raj, Aditya Singh외 3명|arXiv (Cornell University)|2023. 01. 03.

EEG and Brain-Computer Interfaces인용 수 7

한 줄 요약

이 논문은 지적장애(ID)를 가진 개인을 대상으로 Armoni 플랫폼을 사용한 EEG 피드백를 통한 폐쇄형 인지 자극 시스템을 제안한다. 활동 중 좌·우측 대뇌반구에서의 감마파 변화를 분석함으로써 신경적 우세성과 관여도를 파악하고, 실시간 뇌 신호 반응에 기반해 동적으로 훈련을 적응시키는 방식으로 개인화된 훈련을 가능하게 한다. 이는 6명의 피험자에게서 활동 선택 정확도 향상으로 입증되었다.

ABSTRACT

In a growing world of technology, psychological disorders became a challenge to be solved. The methods used for cognitive stimulation are very conventional and based on one-way communication, which only relies on the material or method used for training of an individual. It doesn't use any kind of feedback from the individual to analyze the progress of the training process. We have proposed a closed-loop methodology to improve the cognitive state of a person with ID (Intellectual disability). We have used a platform named 'Armoni', for providing training to the intellectually disabled individuals. The learning is performed in a closed-loop by using feedback in the form of change in affective state. For feedback to the Armoni, an EEG (Electroencephalograph) headband is used. All the changes in EEG are observed and classified against the change in the mean and standard deviation value of all frequency bands of signal. This comparison is being helpful in defining every activity with respect to change in brain signals. In this paper, we have discussed the process of treatment of EEG signal and its definition against the different activities of Armoni. We have tested it on 6 different systems with different age groups and cognitive levels.

연구 동기 및 목표

• 지적장애(ID)를 가진 개인을 대상으로 한 전통적 인지 자극 치료법에서 실시간 피드백의 부족을 해결하기 위해.
• 훈련 활동 중 뇌 신호 반응과 정서적 반응을 평가하기 위해 EEG 신호를 사용하는 폐쇄형 시스템을 개발하기 위해.
• 실시간 EEG 피드백 및 뇌 신호 변화에 기반해 다음 활동을 동적으로 선택함으로써 훈련을 개인화하기 위해.
• 다양한 인지 수준과 연령대를 가진 피험자들에 대해 이 방법의 유효성을 검증하기 위해.

제안 방법

• Armoni 훈련 활동 중 4개 전극(TP9, AF7, AF8, TP10)에서 수집된 EEG 신호를 FFT를 사용해 시간 도메인에서 주파수 도메인으로 변환한다.
• 주파수 도메인의 신호는 다섯 개의 대역(델타, 테타, 알파, 베타, 감마)으로 분할되며, 각각 다른 정신 상태와 관련이 있다.
• 감마파 변화는 Δγ = γ_training − γ_talking 으로 계산되어 각 대뇌반구에서의 신경적 우세성과 훈련 영향을 평가한다.
• 대뇌반구 우세성은 훈련 중과 기저 상태의 대화 중에 측정된 감마 활동의 합(좌측: γ_AF7+γ_TP9, 우측: γ_AF8+γ_TP10)을 비교함으로써 결정된다.
• 다양한 활동 간 감마파 변화를 비교하여 훈련이 뇌에서 신경적으로 우세한가(양성 Δγ) 여부를 판단한다.
• 이 피드백을 바탕으로 시스템은 다음 최적의 훈련 활동을 추천하여 훈련 과정의 실시간 적응을 가능하게 한다.

실험 결과

연구 질문

• RQ1 지적장애(ID)를 가진 개인의 인지 훈련 중 실시간으로 뇌 기반의 관여도 변화를 감지하기 위해 EEG 신호를 어떻게 활용할 수 있는가?
• RQ2 감마파 활동은 Armoni 훈련 활동 중 대뇌반구 우세성과 인지 부하를 판단하는 데 어떤 역할을 하는가?
• RQ3 EEG 기반 피드백는 다양한 인지 능력을 지닌 개인의 인지 자극의 개인화 및 효과성을 향상시킬 수 있는가?
• RQ4 다양한 Armoni 활동(예: 퍼즐, 기억력, 그림 그리기)은 피험자 간 뇌 신호 패tern과 신경적 우세성에 어떤 영향을 미치는가?

주요 결과

• 감마파 비교를 통해 6명의 피험자 중 4명에서 좌측 대뇌반구 우세성을 성공적으로 식별하였으며, 기억력 및 퍼즐 작업 중 좌측 우세성이 관찰되었다.
• 훈련 중 6명의 피험자 중 5명에서 양성 감마파 변화(Δγ > 0)를 기록하여, 훈련 활동이 기저 상태의 대화보다 뇌 기반의 관여도와 인지적 우세성을 나타내었다.
• 시스템은 기억력 활동이 좌측 대뇌반구 우세성 피험자에서 언어 기억력과 시각인지 능력에 더 강한 영향을 미친 것으로 확인하였고, 퍼즐 작업은 우측 대뇌반구 우세성 피험자에서 시각적 구성 능력과 이해 능력을 자극하였다.
• 6명의 피험자 중 4명에서 훈련 활동이 뇌적으로 우세한 상태(양성 Δγ)로 나타나 효과적인 인지 자극이 이루어졌음을 시사하였다.
• 분석 결과, 동일한 활동(예: 기억력)이 개인 간에 다른 뇌 반응을 유도할 수 있음을 확인하여 개인화된 피드백의 필요성을 강조하였다.
• 폐쇄형 피드백 메커니즘이 EEG 반응에 기반해 동적으로 활동을 선택할 수 있게 하여, 인지 훈련에서 실시간 개인화의 가능성을 입증하였다.