[論文レビュー] Structured Interpretation of Temporal Relations

Yuchen Zhang, Nianwen Xue|arXiv (Cornell University)|Aug 23, 2018

Natural Language Processing Techniques参考文献 18被引用数 3

ひとこと要約

本稿では、時間的参照のための1つの先行語に依存する時間的代名詞を介して、イベントと時間表現を従属木としてモデル化することで、時間的関係の構造的解釈を提案する。このアプローチは、ニュースおよび物語文のジャンルを問わず、高い安定性を示す相互アノテーター整合性（F1 > 0.72）を達成しており、得られたコーパスは時間的推論研究のための公開リソースとなっている。

ABSTRACT

Temporal relations between events and time expressions in a document are often modeled in an unstructured manner where relations between individual pairs of time expressions and events are considered in isolation. This often results in inconsistent and incomplete annotation and computational modeling. We propose a novel annotation approach where events and time expressions in a document form a dependency tree in which each dependency relation corresponds to an instance of temporal anaphora where the antecedent is the parent and the anaphor is the child. We annotate a corpus of 235 documents using this approach in the two genres of news and narratives, with 48 documents doubly annotated. We report a stable and high inter-annotator agreement on the doubly annotated subset, validating our approach, and perform a quantitative comparison between the two genres of the entire corpus. We make this corpus publicly available.

研究の動機と目的

• 構造のない、ペアワイズの時間的関係モデリングの限界を是正する。これにより、一貫性のない、不完全なアノテーションが生じる。
• イベントと時間表現の間の依存関係をモデル化することで、言語学的に根拠のある構造的フレームワークを提供する。
• 組み合わせ的爆発の低減と推移性の矛盾の解消により、時間的関係の計算的モデリングを改善する。
• ニュースおよび物語文のジャンルでアノテートされた235ドキュメントのコーパスを用いて、高い相互アノテーター整合性を検証する。
• 時間的関係分析および下流のNLPタスクのための、ジャンルに富んだ公開コーパスを提供する。

提案手法

• 各ノード（イベントまたは時間表現）が、その時間的解釈のための参照時間として唯一の親を持つ従属木を構築する。
• 各依存関係を時間的代名詞のインスタンスとして定義し、親を先行語とし、子をその先行語に依存する代名詞（後続語）とする。
• 各代名詞に対して1つの先行語を用いることで、木構造を保ち、時間的基準付けのあいまいさを回避する。
• ニュースおよび物語文のジャンルで235ドキュメント（うち48件は二重アノテーション）をアノテートし、参照時間とエッジ関係を明示的にラベル付けする。
• 従属構造から派生する追加の時間的関係を推論するために推移性の性質を適用し、ペアワイズの矛盾を回避する。
• F1スコアを用いて、ジャンルを問わず、認識、分類、関係ラベル付けの各分野における相互アノテーター整合性を評価する。

実験結果

リサーチクエスチョン

• RQ1 時間的代名詞に基づく従属木構造は、時間的関係アノテーションの整合性と完全性を向上させることができるか？
• RQ2 提案された構造的アプローチを用いた場合、ニュースと物語文のジャンル間で相互アノテーター整合性はどのように変化するか？
• RQ3 イベントおよび時間表現の分布という観点から、ニュースと物語文の時間的構造にどのような相違があるか？
• RQ4 時間的関係タイプ（例：前後、重複、依存）の分布は、ニュースと物語文の間でどのように異なるか？
• RQ5 ステータイブな表現とイベント的表現は、ジャンルを越えて従属木の構造的差異にどの程度寄与するか？

主な発見

• 提案された従属木アプローチは、両ジャンルにおいてラベル付き関係でF1スコアが0.72を超える、高い安定性を示した。
• ニュースでは時間表現の割合（20%）と重複関係（54%）が高く、物語文ではイベント的表現（51%）と「前後」関係（53%）が多く見られた。
• ニュースにおけるステータイブなイベントは、他のステータイブなイベントを親として持つ確率が57%であり、深い分岐を形成した。一方、物語文では49%のステータイブなイベントが、イベント的親に直接依存しており、短い分岐を形成した。
• 時間表現の種別には顕著な差が見られた：物語文では曖昧な時間表現の割合が67%であったのに対し、ニュースでは22%であった。
• イベント認識と分類では、物語文の方が難易度が高く、F1スコアは0.75および0.72であったのに対し、ニュースでは0.94および0.95であった。
• 235ドキュメント（うち48件は二重アノテーション）のコーパスは、時間的推論および物語のタイムライン構築の研究を目的として、公開されている。