[論文レビュー] ZuCo 2.0: A Dataset of Physiological Recordings During Natural Reading and Annotation

Nora Hollenstein, Marius Troendle+2 more|arXiv (Cornell University)|Dec 2, 2019

Text Readability and Simplification参考文献 27被引用数 29

ひとこと要約

ZuCo 2.0 は、18名の参加者に対して自然な読書および文の意味的関係のタスク固有のアノテーション中に同時に行われた眼動測定とEEG記録を収集した、自由に利用可能なデータセットを提供する。このデータセットにより、受動的読書と能動的意味的アノテーションの間での認知処理の直接比較が可能となり、主な発見として、アノテーションタスクでは固定回数が減少し、読書速度が向上することが示された。また、EEGデータには一貫した固定関連電位（FRP）パターンが確認された。

ABSTRACT

We recorded and preprocessed ZuCo 2.0, a new dataset of simultaneous eye-tracking and electroencephalography during natural reading and during annotation. This corpus contains gaze and brain activity data of 739 sentences, 349 in a normal reading paradigm and 390 in a task-specific paradigm, in which the 18 participants actively search for a semantic relation type in the given sentences as a linguistic annotation task. This new dataset complements ZuCo 1.0 by providing experiments designed to analyze the differences in cognitive processing between natural reading and annotation. The data is freely available here: https://osf.io/2urht/.

研究の動機と目的

• 自然な読書および意味的関係のタスク固有のアノテーション中に、眼動測定と脳活動を同時に捉えた、新たな公開データセットの作成。
• 受動的読書とタスク駆動型アノテーションの間での認知処理の違いを比較分析可能にする。
• 神経認知的根拠に基づく生理的信号を用いたNLPモデルの開発および評価を支援する。
• 機械学習モデルの訓練および検証のための高品質で事前処理済みの生理的データを提供する。
• アノテーションの背後にある認知プロセスを分析することで、人間によるアノテーションの言語的データの理解と質の向上を図る。

提案手法

• 意味的関係のタスク固有のアノテーションと自然な読書という2つの異なる読書パラダイムにおける、眼動測定とEEGデータの同時記録。
• ウィキペディアから抽出した739件の英語文の収集（自然読書：349文、アノテーションタスク：390文）。
• 標準化された眼動測定指標（固定回数、持続時間、スキップ率）とEEGの事前処理（フィルタリング、アーチファクト除去、セグメンテーション）の使用。
• 固定開始時刻にロックされたEEG信号の平均化により固定関連電位（FRP）を計算し、単語ごとの脳波反応を分析可能にする。
• 固定持続時間がFRPの波形に与える影響を検討するため、クラスタリングおよび時間窓スムージング技術の適用。
• 被験者レベルの指標（読書速度、省略率）と、ZuCo 1.0 や GECO といった先行コーパスとの比較を通じたデータ品質の検証。

実験結果

リサーチクエスチョン

• RQ1 意味的関係のタスク固有のアノテーションと自然な読書の間で、眼動測定とEEGパターンはどのように異なるか？
• RQ2 タスク固有のアノテーションは、受動的読書と比較して固定回数と読書時間をどの程度減少させるか？
• RQ3 固定関連電位（FRP）は、読書条件ごとの認知処理の違いを信頼性高く反映できるか？
• RQ4 2つの読書パラダイム間で、固定持続時間および単語レベルのスキップ行動はどのように異なるか？
• RQ5 このコーパスからの生理的信号は、NLPモデルやアノテーションプロセスの改善または評価にどの程度寄与できるか？

主な発見

• 参加者は、タスク固有のアノテーション条件では自然な読書と比較して有意に少ない固定回数で、より速く読書していた（平均速度：1文あたり4.81秒）が、自然な読書では平均5.84秒であった。
• スキップ率（固定されなかった語の割合）は、アノテーションタスク中に上昇し、より効率的で目的指向的な読書行動を示していた。
• 固定関連電位（FRP）は、両タスクで一貫した二相性の陽性ピーク（約100 ms付近およびその後のピーク、持続時間依存）を示し、信頼できる神経信号の質が確認された。
• EEGデータから、長時間の固定はFRPに第二の陽性ピークを伴うことが判明し、これは先行研究と整合し、持続的な認知処理を示していた。
• このコーパスには、ラベル付けされた意味的関係を有する739文が含まれており、関係抽出や分類タスクへの直接的な応用が可能である。
• このデータセットは https://osf.io/2urht/ で公開されており、生データおよび事前処理済みデータ、スクリプト、詳細な被験者レベルの指標を含む。