[論文レビュー] Comparison of P300 Responses in Auditory, Visual and Audiovisual Spatial Speller BCI Paradigms

Moonjeong Chang, Nozomu Nishikawa+5 more|arXiv (Cornell University)|Jan 27, 2013

EEG and Brain-Computer Interfaces参考文献 3被引用数 34

ひとこと要約

本研究では、16名のBCI初心者を対象に、聴覚、視覚、視聴覚の空間スイマーBCIパラダイムにおけるP300反応を比較した。オフライン解析では聴覚刺激がより長い潜伏期のP300反応を誘発したが、オンラインスイミング精度は視覚モダリティが著しく高く（95.0％）、聴覚は低い（52.5％）ことが判明し、BCI初心者を対象とした実用的利用に向けた聴覚BCIのさらなる開発が求められることが示された。

ABSTRACT

The aim of this study is to provide a comprehensive test of three spatial speller settings, for the auditory, visual, and audiovisual paradigms. For rigour, the study is conducted with 16 BCI-naïve subjects in an experimental set-up based on five Japanese hiragana characters. Auditory P300 responses give encouragingly longer target vs. non-target latencies during the training phase, however, real-world online BCI experiments in the multimodal setting do not validate this potential advantage. Our case studies indicate that the auditory spatial unimodal paradigm needs further development in order to be a viable alternative to the established visual domain speller applications, as far as BCI-naïve subjects are concerned.

研究の動機と目的

• BCI初心者における聴覚、視覚、視聴覚のP300ベースの空間スイマーBCIのパフォーマンスを評価すること。
• EEGベースのBCIシステムにおけるモダリティの影響がP300反応の潜伏期および振幅に与える影響を評価すること。
• 聴覚空間スイマーパラダイムが、既存の視覚スイマー系に匹敵または上回るパフォーマンスを達成できるかどうかを特定すること。
• 単一モダリティおよびマルチモダリティBCI構成におけるユーザーの快適性および使いやすさを調査すること。

提案手法

• 10/10拡張国際システムに従い配置された電極を用いた16チャネルのEEGシステム（g.USBamp）を用いた。
• 視覚、聴覚、または視聴覚モダリティを用いて、5つの空間的位置からの200 msの刺激を提示した。
• 視覚文字位置と整合するように、ベクトルベースの音声パンニングを用いて空間的聴覚刺激を生成した。
• 分類のために、0–600 msのイベント関連電位（ERP）区間に対して線形判別分析（LDA）を適用した。
• 刺激間隔（ISI）を500 msに設定し、フィルタを高域透過0.1 Hz、低域透過100 Hz、48–52 Hzのノッチフィルタとした。
• オンラインBCI実験では、5つのランダムなひらがなの文字列を用い、各ターゲットを1回の試行で10回ずつ提示した。

実験結果

リサーチクエスチョン

• RQ1 BCI初心者において、聴覚P300反応は視覚および視聴覚反応に比べてより長い潜伏期を示すか？
• RQ2 聴覚空間スイマーパラダイムは、視覚パラダイムに匹敵または上回るオンラインスイミング精度を達成できるか？
• RQ3 視聴覚マルチモーダル刺激の追加が、P300反応特性およびBCIパフォーマンスに与える影響は何か？
• RQ4 P300反応の振幅および潜伏期が、リアルタイムBCI運用における実際のスイミング精度とどの程度相関しているか？

主な発見

• 聴覚単一モダリティパラダイムでは、ERP波形および相関マップに明確なデフレクションが観察され、449 msにピークを示すことで、より長い潜伏期のP300反応が誘発された。
• 長期間のP300潜伏期にもかかわらず、聴覚モダリティは3つのモダリティの中で最も低いオンラインスイミング精度（52.5％）を示した。
• 視覚単一モダリティパラダイムが最も高いオンライン精度（95.0％）を達成し、聴覚および視聴覚条件を著しく上回った。
• 視聴覚マルチモーダルパラダイムは高い精度（91.3％）を達成し、標準偏差が低い（12.6％）ことから、信頼性の高いパフォーマンスであることが示された。
• トポグラフィー図は、聴覚条件下でも局在化したP300分布を確認し、分類性能が低くても神経的信号生成が信頼できる可能性を示唆した。
• オフラインERP特性とオンラインパフォーマンスの間の乖離は、聴覚モダリティにおける神経反応特徴を実用的BCI制御に変換するうえでの重要なギャップを示している。