[論文レビュー] An Inventory of Preposition Relations

Vivek Srikumar, Dan Roth|arXiv (Cornell University)|May 24, 2013

Natural Language Processing Techniques参考文献 2被引用数 10

ひとこと要約

本稿では、Preposition Projectのインベントリから意味的に関連する意味を統合することで得られる32の意味的関係の統一的分類法を提案する。意味的関係のラベルへの前向きのマッピングは、手動による検証とインターアノテーター間一致性（kappa = 0.75）を経て行われ、文脈における前置詞の一貫性のある意味的ラベリングを可能にし、前向きの意味解釈のための下流NLPタスクを支援する。

ABSTRACT

We describe an inventory of semantic relations that are expressed by prepositions. We define these relations by building on the word sense disambiguation task for prepositions and propose a mapping from preposition senses to the relation labels by collapsing semantically related senses across prepositions.

研究の動機と目的

• 複数の前置詞にわたる前向きの意味的関係の包括的かつ意味的に整合性のあるインベントリを定義すること。
• 異なる前置詞にわたる意味的に関連する意味をグループ化することで、前向きの意味の曖昧さを解消すること。
• 手動によるアノテーションと検証を用いて、前向きの意味から関係タイプへのラベル付きデータセットを構築すること。
• 標準化された意味的分類法を提供することで、前向きの意味解釈のための計算モデルを支援すること。
• インターアノテーター間一致性と意味的・慣用的表現の手動クリーニングを通じて、ラベルの一貫性と信頼性を確保すること。

提案手法

• 異なる前置詞にわたる意味的に同等の意味を特定することで、Preposition Projectのインベントリに含まれる前向きの意味を関係ラベルにマッピングする。
• 意味の定義と関連する前置詞を用いて、意味的に類似する意味を32の関係カテゴリにクラスタリングする。
• 曖昧または慣用的表現の意味を解消するための手動クリーニングフェーズを実施し、20個のSemEval 2007トレーニング例からの過半数ラベルを用いる。
• 200文を2名のネイティブ英語話者が、関係定義のみをガイドラインとして用いてアノテートすることで、マッピングの妥当性を検証する。
• Cohenのkappa係数（0.75）を用いてインターアノテーター間一致性を測定し、元のコーパスラベル（kappa = 0.74–0.76）と比較する。
• 提案されたマッピングを用いて、SemEval 2007の前向きの意味解釈データセットを関係ラベル付きの例に変換する。

実験結果

リサーチクエスチョン

• RQ1 異なる語彙的項目にわたる前置詞が一貫して表現する意味的関係は何か？
• RQ2 意味的に関連する前向きの意味を、体系的に整合性のある関係カテゴリに統合する方法は何か？
• RQ3 人間の専門家による一貫性のある統一的分類法が、どの程度信頼的にアノテート可能か？
• RQ4 提案された関係マッピングは、既存の前向きの意味インベントリと比較して、カバー範囲と整合性の点でどのように異なるか？
• RQ5 標準ベンチマークデータセットにおける、定義された前向きの関係に属する例の分布はどのようになっているか？

主な発見

• 分類法は34の前置詞が表す32の明確な意味的関係を定義しており、空間的・時間的・因果的・抽象的関係をカバーする。
• 『ObjectOfVerb』関係は、トレーニング例（1,801件）とテスト例（882件）の両方で最も多く、言語データにおけるその頻度の高さを示している。
• 『Location』関係は、トレーニング例3,096件、テスト例1,531件と2番目に多い例数を示し、自然言語での頻繁な使用を反映している。
• 『Other』関係は、72の意味を関連付けるが、テスト例は42件と最も少ないため、まれなまたは整合性のない前置詞の使用を捉えているとされる。
• 『Destination』と『Direction』関係は、それぞれトレーニング例1,054件および909件と高い例数を示しており、方向性や移動を表す構文におけるその重要性を示している。
• インターアノテーター間一致性は中程度の水準（kappa = 0.75）であり、関係定義の明確さと信頼性が確認された。