[论文解读] Search Strategy Formulation for Systematic Reviews: issues, challenges and opportunities

Andrew MacFarlane, Tony Russell‐Rose+1 more|arXiv (Cornell University)|Dec 17, 2021

Meta-analysis and systematic reviews被引用 8

一句话总结

本文提出了一套设计原则，通过解决复杂性、耗时和易错性等关键挑战，以提升系统性综述检索策略制定过程中的信任度、透明度和可重复性。该研究综合现有文献，识别出检索策略开发中的问题，并倡导使用能够增强医疗领域系统性综述可解释性和可重复性的工具。

ABSTRACT

Systematic literature reviews play a vital role in identifying the best available evidence for health and social care policy. The resources required to produce systematic reviews can be significant, and a key to the success of any review is the search strategy used to identify relevant literature. However, the methods used to construct search strategies can be complex, time consuming, resource intensive and error prone. In this review, we examine the state of the art in resolving complex structured information needs, focusing primarily on the healthcare context. We analyse the literature to identify key challenges and issues and explore appropriate solutions and workarounds. From this analysis we propose a way forward to facilitate trust and transparency and to aid explainability, reproducibility and replicability through a set of key design principles for tools to support the development of search strategies in systematic literature reviews.

研究动机与目标

• 识别并分析在系统性综述中制定检索策略的核心挑战，特别是在医疗背景下的挑战。
• 检查当前检索策略开发方法的局限性，包括耗时、资源密集以及易出错的问题。
• 通过结构化工具支持，提升系统性综述检索过程的透明度、可解释性和可重复性。
• 提出可操作的设计原则，用于支持系统性综述检索策略制定的软件工具。
• 弥合信息检索最佳实践与卫生和社会 care 研究中系统性综述者实际需求之间的差距。

提出的方法

• 开展全面的文献综述，重点关注医疗领域系统性综述中的结构化信息需求。
• 分析现有检索策略制定方法，识别出复杂性、缺乏标准化以及工具支持不足等反复出现的问题。
• 将研究发现整合为一套设计原则框架，旨在提升检索策略开发过程中的信任度、透明度和可重复性。
• 强调工具在自动化和记录检索策略各组成部分（包括查询制定和相关性过滤）方面的作用。
• 提出支持版本控制、审计追踪和人机协同优化的原则，以增强可解释性。
• 整合信息检索（IR）研究的见解，使系统性综述实践与最先进的IR技术保持一致。

实验结果

研究问题

• RQ1 在医疗领域系统性综述中，制定检索策略的主要挑战是什么？
• RQ2 当前检索策略开发方法在系统性综述中的可重复性和透明度方面产生何种影响？
• RQ3 哪些设计原则能够提升支持系统性综述检索策略制定工具的可靠性和可用性？
• RQ4 信息检索技术在哪些方面可被调整以支持系统性综述工作流程？
• RQ5 如何通过工具设计减少检索策略开发的时间和错误负担，同时不损害敏感性或特异性？

主要发现

• 由于缺乏标准化且依赖工具支持的工作流程，系统性综述中的检索策略制定过程高度复杂、耗时且易出错。
• 当前实践往往缺乏透明度和可审计性，使得不同综述团队难以复制或验证检索策略。
• 最先进的信息检索技术与系统性综述工作流程中的实际应用之间存在显著差距。
• 所提出的设 计原则强调版本控制、模块化和可追溯性，以增强检索策略的可解释性和可重复性。
• 支持结构化查询制定、日志记录和协作评审的工具可显著减少错误并提高效率。
• 采用这些原则可使卫生和社会 care 研究中的系统性综述流程更加可靠、透明且可扩展。