[論文レビュー] Measuring Teachers' Visual Expertise Using the Gaze Relational Index Based on Real-world Eye-tracking Data and Varying Velocity Thresholds

Christian Kosel, Angelina Mooseder+2 more|arXiv (Cornell University)|Apr 11, 2023

Gaze Tracking and Assistive Technology被引用数 5

ひとこと要約

本研究では、実世界のモバイル眼動態データを用いて、教師の視覚的熟達度を測定する新しい指標である「視線関係インデックス（GRI）」を導入した。GRIは平均固定時間と平均固定回数の比として定義される。結果として、経験豊富な教師は有意に低いGRIを示し、熟練した分野固有の知識と関連する、より速く頻繁な固定を示している。一方、速度閾値の選定が結果に大きく影響することから、眼動態法の透明性が求められる。

ABSTRACT

This article adds to the understanding of teachers' visual expertise by measuring visual information processing in real-world classrooms (mobile eye-tracking) with the newly introduced Gaze Relational Index (GRI) metric, which is defined as the ratio of mean fixation duration to mean fixation number. In addition, the aim was to provide a methodological contribution to future research by showing to what extent the selected configurations (i.e. varying velocity thresholds and fixation merging) of the eye movement event detection algorithm for detecting fixations and saccades influence the results of eye-tracking studies. Our study leads to two important take-home messages: First, by following a novice-expert paradigm (2 novice teachers & 2 experienced teachers), we found that the GRI can serve as a sensitive measure of visual expertise. As hypothesized, experienced teachers' GRI was lower, suggesting that their more fine-graded organization of domain-specific knowledge allows them to fixate more rapidly and frequently in the classroom. Second, we found that the selected velocity threshold parameter alter and, in the worst case, bias the results of an eye-tracking study. Therefore, in the interest of further generalizability of the results within visual expertise research, we emphasize that it is highly important to report configurations that are relevant for the identification of eye movements.

研究の動機と目的

• 実教室環境における視覚的熟達度を測定するための新しい指標、視線関係インデックス（GRI）の開発および妥当性の検証。
• 眼動態検出における速度閾値の設定の違いが、教育的研究における眼動態データの信頼性および妥当性に与える影響を調査すること。
• 実教室環境におけるモバイル眼動態を用いて、初心者と熟練教師の視覚的注意パターンを比較すること。
• 再現可能性および一般化可能性を高めるために、眼動態アルゴリズムの具体的な設定を報告することの重要性を強調し、研究手法の透明性を促進すること。

提案手法

• 視線関係インデックス（GRI）は、観察期間ごとの平均固定時間と平均固定回数の比として計算される。
• 実際の授業中に、4名の教師（初心者2名、経験豊富な教師2名）からモバイル眼動態データを収集した。
• 眼動態イベント（固定と移動）は、異なる速度閾値と固定結合パラメータを用いたアルゴリズムで検出された。
• 本研究では、速度閾値を系統的に変化させ、GRI値および全体的なデータ解釈への影響を評価した。
• GRIが熟練度の違いを区別できるかを評価するために、初心者対熟練教師の比較パラダイムを適用した。
• 統計的分析により、異なるアルゴリズム設定下での初心者と熟練教師間のGRI値の差を比較した。

実験結果

リサーチクエスチョン

• RQ1 視線関係インデックス（GRI）は、教室授業中の視覚的注意パターンの観点から、初心者と熟練教師を効果的に区別できるか？
• RQ2 眼動態検出アルゴリズムにおける速度閾値の設定の違いが、計算されたGRI値およびその解釈にどのように影響するか？
• RQ3 アルゴリズム設定の選定が、教育的文脈における眼動態研究の結果に歪みやバイアスをもたらす程度はどの程度か？
• RQ4 GRIは、現実の授業環境における視覚的熟達度の信頼性ある指標および感受性の高い指標として機能できるか？

主な発見

• 経験豊富な教師は、初心者教師と比較して有意に低い視線関係インデックス（GRI）を示しており、これはより速く頻繁な固定を示していることを意味する。
• GRIは視覚的処理戦略の違いを効果的に捉えており、視覚的熟達度の感受性の高い指標としての利用が支持される。
• 速度閾値の設定の違いがGRI値に顕著な影響を与え、一部の設定では結果に系統的なバイアスが生じた。
• 本研究では、速度閾値の選定が眼動態研究における結果の歪みを引き起こす重要な方法論的要因であることが示された。
• 再現可能性および一般化可能性を確保するためには、特に速度閾値を含む具体的なアルゴリズム設定の報告が不可欠である。
• 研究結果は、眼動態研究における標準化された報告慣行の必要性を強調しており、研究手法の透明性を確保する必要がある。