[論文レビュー] Tip of the Tongue Known-Item Retrieval: A Case Study in Movie Identification

Jaime Arguello, Adam Ferguson+4 more|arXiv (Cornell University)|Jan 18, 2021

Emotion and Mood Recognition参考文献 40被引用数 4

ひとこと要約

本稿は、映画特定における想起の途切れ（TOT）状態における既知のアイテム検索を調査し、ユーザーがコミュニティ型質問応答データを通じて不完全な記憶をどのように表現するかを分析している。ユーザーはコンテンツ、文脈、および以前の検索履歴に依存しており、曖昧さを示す表現や相対的比較を用いる。こうした戦略は、正確さに欠けるにもかかわらず、驚くべきことに検索性能を向上させる。これは、情報検索システムにおいて、特化したクエリ理解とドキュメント表現の必要性を示唆している。

ABSTRACT

While current information retrieval systems are effective for known-item retrieval where the searcher provides a precise name or identifier for the item being sought, systems tend to be much less effective for cases where the searcher is unable to express a precise name or identifier. We refer to this as tip of the tongue (TOT) known-item retrieval, named after the cognitive state of not being able to retrieve an item from memory. Using movie search as a case study, we explore the characteristics of questions posed by searchers in TOT states in a community question answering website. We analyze how searchers express their information needs during TOT states in the movie domain. Specifically, what information do searchers remember about the item being sought and how do they convey this information? Our results suggest that searchers use a combination of information about: (1) the content of the item sought, (2) the context in which they previously engaged with the item, and (3) previous attempts to find the item using other resources (e.g., search engines). Additionally, searchers convey information by sometimes expressing uncertainty (i.e., hedging), opinions, emotions, and by performing relative (vs. absolute) comparisons with attributes of the item. As a result of our analysis, we believe that searchers in TOT states may require specialized query understanding methods or document representations. Finally, our preliminary retrieval experiments show the impact of each information type presented in information requests on retrieval performance.

研究の動機と目的

• 以前に視聴した映画を名前で思い出せない状態にあるユーザーが、情報ニーズをどのように表現するかを理解すること。
• 映画のタイトルや識別子を思い出せない際、ユーザーが記憶し、伝えることができる情報の種別を特定すること。
• 曖昧さ（ヘッジング）、意見、相対的比較などの言語的・認知的戦略が、TOT状況における検索効果に与える影響を評価すること。
• メタデータ、コンテンツ記述、文脈的手がかりが、TOT状態における既知のアイテム検索において有意義に寄与するかを評価すること。
• 記憶に限界があり、高いイライラを伴う情報ニーズを抱えるユーザーを支援する、将来の情報検索システムの設計を支援すること。

提案手法

• 『I Remember This Movie』というコミュニティ型質問応答サイトに掲示された1,000件のTOTリクエストを対象に、定性的な文単位のコード化分析を実施した。
• 4つの次元（文の対象、意見／感情の有無、ヘッジング（不確実性）、相対的比較）を対象に、下位から上位へのコード化スキームを構築した。
• 各文を、コンテンツ手がかり、文脈手がかり、メタデータ、自己反映戦略を含む12種類の異なるコードタイプの1つ以上にマッピングした。
• Okapi BM25モデルを用いて検索実験を実施し、各コードタイプが検索性能に与える影響を評価した。
• 正解の映画プロット記述を基準として、精度（precision）と再現率（recall）を測定することで、検索効果を評価した。
• 特定の文種を含む・含まないを比較し、検索成功に与える貢献度を評価した。

実験結果

リサーチクエスチョン

• RQ1 名前を思い出せない映画を特定しようとするTOT状態にある検索者が、どのようにその情報ニーズを表現するか。
• RQ2 TOT状態にある検索者が通常記憶し、伝える情報の種別（コンテンツベース、文脈、メタデータ）は何か。
• RQ3 不確実性（ヘッジング）、意見、感情、相対的比較の表現が、検索性能にどのように影響するか。
• RQ4 メタデータ（例：ジャンル、公開年）、コンテンツ記述（例：プロット、トーン）が、TOT状況における効果的な検索にどの程度貢献するか。
• RQ5 曖昧または曖昧な戦略が検索性能を低下させるのか、それとも依然として正確な結果を支持できるのか。

主な発見

• TOT状態にある検索者は、映画のコンテンツ、自身の以前の関与の文脈、および以前の検索履歴に関する情報をよく記憶・伝えることから、多面的な記憶再構築が行われていることが示された。
• ヘッジングや不確実性の表現は検索性能を低下させない。むしろ、しばしばターゲットの映画記述と一致する有用なキーワードを提供する。
• 相対的比較（例：「Xほど暗くないが、Yほど明るくもない」）は、曖昧であっても顕著なキーワードを含むことが多く、検索性能を向上させる。
• ジャンル、トーン、公開年、言語などのメタデータは、粗い粒度と映画間での高い重複性のため、検索にあまり効果的ではなかった。
• 視覚的スタイル、プロット、物語構造に関する記述を含む文は、単にメタデータや文脈的手がかりに依存する文よりも、より高い検索性能を示した。
• 以前の検索履歴についての自己反映的記述が含まれる文は、性能に顕著な悪影響を及ぼさなかったため、情報検索システムがこうした戦略を活用可能であると考えられる。