[論文レビュー] Using Single-Trial Representational Similarity Analysis with EEG to track semantic similarity in emotional word processing

Feng Cheng|arXiv (Cornell University)|Oct 4, 2021

Face Recognition and Perception参考文献 35被引用数 6

ひとこと要約

本研究では、EEGデータに対して1試行単位の代表的類似性分析（RSA）を導入し、意味的類似性が感情的語の処理に与える影響を調査した。高い試行回数および被験者数を用いて、感情的語の処理中に500–800msの時間窓における神経的表象がより深い意味的分析を反映していることが明らかになった。これは、認知神経科学研究におけるEEGにおける1試行単位RSAの実現可能性と解釈可能性を示している。

ABSTRACT

Electroencephalography (EEG) is a powerful non-invasive brain imaging technique with a high temporal resolution that has seen extensive use across multiple areas of cognitive science research. This thesis adapts representational similarity analysis (RSA) to single-trial EEG datasets and introduces its principles to EEG researchers unfamiliar with multivariate analyses. We have two separate aims: 1. we want to explore the effectiveness of single-trial RSA on EEG datasets; 2. we want to utilize single-trial RSA and computational semantic models to investigate the role of semantic meaning in emotional word processing. We report two primary findings: 1. single-trial RSA on EEG datasets can produce meaningful and interpretable results given a high number of trials and subjects; 2. single-trial RSA reveals that emotional processing in the 500-800ms time window is associated with additional semantic analysis.

研究の動機と目的

• 1試行単位のRSAがEEGデータセットに与える効果の有効性を評価すること。
• EEGと計算的意味的モデルを用いて、感情的語の処理における意味的意味の役割を調査すること。
• 十分な試行回数と被験者数が確保された場合、1試行単位RSAが解釈可能な神経的表象を生成できることを示すこと。
• RSAを認知神経科学分野における多変量EEG解析と結びつけること。特に、RSAに馴染みのない研究者に導入すること。

提案手法

• 刺激間の神経パターンを比較するために、1試行単位のEEGデータに代表的類似性分析（RSA）を適応する。
• 計算的意味的モデル（例：単語埋め込み）を用いて、期待される代表的類似性行列を定義する。
• 多変量パターン解析を用いて、1試行単位のEEGデータから代表的不類似性行列（RDM）を計算する。
• EEG由来のRDMと意味的RDMを比較し、神経活動が意味的類似性にどれほど敏感であるかを評価する。
• 神経的RDMと意味的RDMの類似性の統計的有意性を評価するために、置換検定を適用する。
• 刺激提示後の500–800msの時間窓に焦点を当て、意味的処理のダイナミクスを特定する。

実験結果

リサーチクエスチョン

• RQ1 十分な試行回数と被験者数がある場合、1試行単位RSAはEEGデータから意味のある神経的表象を信頼性高く抽出できるか？
• RQ2 感情的語提示後の500–800msの神経活動は、意味的類似性に敏感か？
• RQ3 計算的モデルで定義された意味的類似性に基づく感情的語の神経的表象は、どのように関連しているか？
• RQ4 1試行単位RSAは、初期の知覚的反応を超えて、感情的刺激に関連する意味的コンテンツの微細な神経的ダイナミクスをどれほど明らかにできるか？

主な発見

• 十分な試行回数と被験者数が確保された場合、EEGデータセットに対する1試行単位RSAは意味的で解釈可能な結果をもたらす。
• 500–800msの時間窓における神経的表象は、意味的類似性と顕著な一致を示しており、より深い意味的分析を反映している。
• 神経的RDMは500–800msの時間窓で意味的RDMと相関しており、この期間が感情的語の意味的処理を反映していると考えられる。
• 本研究では、1試行単位RSAが感情的刺激の意味的コンテンツに関連する微細な神経的ダイナミクスを検出できることを示した。