[논문 리뷰] Head-related Impulse Response-based Spatial Auditory Brain-computer Interface

Chisaki Nakaizumi, Toshie Matsui외 3명|arXiv (Cornell University)|2014. 04. 15.

EEG and Brain-Computer Interfaces인용 수 2

한 줄 요약

이 연구는 헤드셋을 사용하여 기존의 벡터 기반 진폭 패닝(VBAP)보다 소리의 정밀한 국소화를 향상시키기 위해 청취자 관련 인파르스 응답(HRIR) 기반의 공간 청각 뇌-컴퓨터 인터페이스(BCI)를 제안한다. BCI 경험이 없는 사용자에서도 안정적이고 정확한 P300 반응을 입증하였으며, 평균 정보 전송 속도(ITR)는 1.35 bit/min을 기록하여 이전의 VBAP 기반 청각 BCI보다 높았으며, 비침습적이고 자극 유도형 청각 스펠러 시스템에서 HRIR이 실용적인 대안이 될 수 있음을 보여준다.

ABSTRACT

This study provides a comprehensive test of the head-related impulse response (HRIR) to an auditory spatial speller brain-computer interface (BCI) paradigm, including a comparison with a conventional virtual headphone-based spatial auditory modality. Five BCI-naive users participated in an experiment based on five Japanese vowels. The auditory evoked potentials obtained produced encouragingly good and stable P300-responses in online BCI experiments. Our case study indicates that the auditory HRIR spatial sound paradigm reproduced with headphones could be a viable alternative to established multi-loudspeaker surround sound BCI-speller applications.

연구 동기 및 목표

• . 연구의 목적은 장기간 훈련이 필요하지 않은 비침습적이고 자극 유도형 청각 BCI를 개발하는 것이다.
• . 다루는 문제는 기존 청각 BCI의 정밀도와 사용성의 한계, 특히 BCI 경험이 없는 사용자에게서의 한계이다.
• . 목적은 HRIR 기반 공간 음향 국소화가 기존 VBAP 방법에 비해 P300 반응의 신뢰성과 정보 전송 속도(ITR)를 향상시키는지 평가하는 것이다.
• . 연구는 HRIR 기반 청각 BCI의 실시간 온라인 실험에서의 실현 가능성을 검증하고자 한다.
• . HRIR이 다중 loudspeaker 주변 음향 BCI 시스템에 비해 안정적이고 정확하며 효율적인 대안을 제공할 수 있는지 확인하고자 한다.

제안 방법

• . 연구는 CIPIC HRTF 데이터베이스를 사용하여, 5개의 아자이뮬러스 위치(−80°, −40°, 0°, 40°, 80°)에서 단일 귀 음성 소리를 공간화하기 위해 청취자 관련 인파르스 응답(HRIR)을 적용한다.
• . 음향 자극은 헤드셋을 통해 제공되어 HRIR 필터링을 통해 가상의 음원을 시뮬레이션하며, 이는 이앙간 시간 차이(ITD), 이앙간 수준 차이(IID), 그리고 스펙트럼 피처를 포함한다.
• . 뇌파 신호는 확장된 10/10 국제 체계에 따라 16개의 활성 전극에 의해 기록되었으며, 기준 전극은 왼쪽 귀lobe에, 지상 전극은 FPz에 위치시켰다.
• . 사건 관련 잠재전위(ERP)는 0–800 ms 창을 기준으로 분석되었으며, 평균화된 EEG 데이터에 대해 단계적 선형 판별 분석(SWLDA)을 사용하여 분류를 수행하였다.
• . 자극 제시는 250 ms 지속 시간과 150 ms의 간격 간격(ISI)을 사용하였으며, 각 모음 유형당 10회의 평균을 수집하였다.
• . 정보 전송 속도(ITR)는 표준 BCI 지표를 사용하여 계산되었으며, 동일한 전극 배치와 자극 제시 조건을 사용한 이전의 VBAP 기반 청각 BCI 연구와 결과를 비교하였다.

실험 결과

연구 질문

• RQ1 . HRIR 기반 공간 청각 자극은 BCI 경험이 없는 사용자에서 신뢰성 있고 안정적인 P300 반응을 유도하는가?
• RQ2 . HRIR 기반 청각 BCI의 정보 전송 속도(ITR)는 기존 VBAP 기반 청각 BCI와 비교해 어떻게 다른가?
• RQ3 . HRIR 기반 헤드셋 재생 방식은 청각 스펠러 프레임워크에서 다중 loudspeaker 주변 음향 시스템과 비교해 동등하거나 더 뛰어난 성능을 달성할 수 있는가?
• RQ4 . 짧은 간격 간격(ISI = 150 ms)이 HRIR 기반 청각 BCI에서 분류 정확도와 반응 지연에 어떤 영향을 미치는가?
• RQ5 . HRIR 기반 공간화가 비침습적 청각 BCI에서 진폭 패닝에 비해 반응 정확도와 일관성을 얼마나 향상시키는가?

주요 결과

• . 5명의 BCI 경험이 없는 사용자에서 평균 분류 정확도는 44%였으며, 한 명의 사용자는 100% 정확도를 기록하여 훈련을 통해 개인의 성능 향상 잠재력이 높음을 시사한다.
• . HRIR 기반 BCI의 평균 정보 전송 속도(ITR)는 1.35 bit/min이었으며, 동일한 연구에서 보고된 VBAP 기반 방법의 평균 1.05 bit/min보다 유의미하게 높았다.
• . HRIR 기반 시스템에서 기록된 최고의 ITR는 2.40 bit/min이었으며, VBAP의 최고 점수인 1.78 bit/min을 초월하여 뛰어난 성능을 입증하였다.
• . P300 반응 지연은 항상 400–600 ms 범위에서 감지되었으며, AUC 값은 목표 자극과 비목표 자극 간의 강한 분리 가능성을 나타내었다.
• . 심리물리적 실험 결과, 모든 자극에 대해 인식 정확도가 94% 이상이었으며, 반응 시간은 약 350 ms에 집중되어 있어 효과적인 공간 인지가 이루어졌음을 시사한다.
• . 목표 자극 간 반응 시간에 유의미한 차이가 없었으며, 다양한 공간 위치에서 일관된 청각 처리가 이루어졌음을 나타낸다.