[论文解读] Tip of the Tongue Known-Item Retrieval: A Case Study in Movie Identification

Jaime Arguello, Adam Ferguson+4 more|arXiv (Cornell University)|Jan 18, 2021

Emotion and Mood Recognition参考文献 40被引用 4

一句话总结

本文研究了在电影识别中，用户在舌尖现象（TOT）状态下的已知项目检索，分析用户如何通过社区问答数据表达不完整的记忆。研究发现，用户依赖内容、上下文和先前的搜索尝试，使用模糊表达和相对比较——这些策略尽管不精确，却意外地提升了检索性能，表明信息检索系统需要专门的查询理解与文档表示方法。

ABSTRACT

While current information retrieval systems are effective for known-item retrieval where the searcher provides a precise name or identifier for the item being sought, systems tend to be much less effective for cases where the searcher is unable to express a precise name or identifier. We refer to this as tip of the tongue (TOT) known-item retrieval, named after the cognitive state of not being able to retrieve an item from memory. Using movie search as a case study, we explore the characteristics of questions posed by searchers in TOT states in a community question answering website. We analyze how searchers express their information needs during TOT states in the movie domain. Specifically, what information do searchers remember about the item being sought and how do they convey this information? Our results suggest that searchers use a combination of information about: (1) the content of the item sought, (2) the context in which they previously engaged with the item, and (3) previous attempts to find the item using other resources (e.g., search engines). Additionally, searchers convey information by sometimes expressing uncertainty (i.e., hedging), opinions, emotions, and by performing relative (vs. absolute) comparisons with attributes of the item. As a result of our analysis, we believe that searchers in TOT states may require specialized query understanding methods or document representations. Finally, our preliminary retrieval experiments show the impact of each information type presented in information requests on retrieval performance.

研究动机与目标

• 理解用户在舌尖现象（TOT）状态下，当无法回忆起已观看过的电影名称时，如何表达其信息需求。
• 识别用户在无法回忆电影标题或标识符时，通常记住并传达的各类信息类型。
• 评估不同语言与认知策略（如模糊表达、观点、相对比较）对TOT场景下检索效果的影响。
• 评估元数据、内容描述和上下文线索在TOT已知项目检索中是否对检索性能有实质性贡献。
• 为未来支持记忆受限、高挫败感信息需求的检索系统设计提供依据。

提出的方法

• 对来自‘I Remember This Movie’社区问答网站的1,000条TOT请求进行了定性、句子级别的编码分析。
• 基于四个维度构建自下而上的编码方案：句子目标、观点/情绪的存在、模糊表达（不确定性）以及相对比较。
• 将每条句子映射到12种不同编码类型中的一种或多类，包括内容线索、上下文线索、元数据和自我反思策略。
• 使用Okapi BM25模型进行检索实验，评估每种编码类型对检索性能的影响。
• 通过测量精确率与召回率来评估检索效果，以真实电影剧情描述作为目标。
• 对比包含与不包含特定句型时的性能，以评估其对检索成功的影响。

实验结果

研究问题

• RQ1 在无法以名称回忆起电影时，TOT状态下的搜索者如何表达其信息需求？
• RQ2 TOT状态下的搜索者通常能回忆并传达哪些类型的信息——基于内容、上下文，还是元数据？
• RQ3 不确定性的表达（模糊表达）、观点、情绪和相对比较如何影响检索性能？
• RQ4 元数据（如类型、上映日期）和内容描述（如剧情、基调）在TOT场景中在多大程度上促进有效检索？
• RQ5 不精确或模糊的策略是否降低检索性能，还是仍能支持准确结果？

主要发现

• TOT状态下的搜索者通常能回忆并传达关于电影内容、先前参与情境以及先前搜索尝试的信息，表明其记忆检索具有多维特征。
• 模糊表达和不确定性表达并未降低检索性能；事实上，它们常提供有助于匹配目标电影描述的关键字。
• 相对比较（如‘不像X那样黑暗，但也不像Y那样明亮’）常包含显著关键字，即使比较本身模糊，也能提升检索效果。
• 元数据（如类型、基调、上映日期、语言）在检索中效果较弱，可能由于粒度过粗且电影间重叠度高。
• 提及视觉风格、剧情或叙事结构的句子，其检索性能强于仅依赖元数据或上下文线索的句子。
• 包含对先前搜索尝试的自我反思性陈述的句子并未显著影响性能，表明此类策略可被检索系统有效利用。