[论文解读] Note2Chat: Improving LLMs for Multi-Turn Clinical History Taking Using Medical Notes
Note2Chat 通过将医疗笔记转化为对话,采用三阶段微调和单-turn 推理范式来改进信息收集与诊断准确性,从而训练大模型进行结构化、笔记引导的多轮病史采集与鉴别诊断。
Effective clinical history taking is a foundational yet underexplored component of clinical reasoning. While large language models (LLMs) have shown promise on static benchmarks, they often fall short in dynamic, multi-turn diagnostic settings that require iterative questioning and hypothesis refinement. To address this gap, we propose \method{}, a note-driven framework that trains LLMs to conduct structured history taking and diagnosis by learning from widely available medical notes. Instead of relying on scarce and sensitive dialogue data, we convert real-world medical notes into high-quality doctor-patient dialogues using a decision tree-guided generation and refinement pipeline. We then propose a three-stage fine-tuning strategy combining supervised learning, simulated data augmentation, and preference learning. Furthermore, we propose a novel single-turn reasoning paradigm that reframes history taking as a sequence of single-turn reasoning problems. This design enhances interpretability and enables local supervision, dynamic adaptation, and greater sample efficiency. Experimental results show that our method substantially improves clinical reasoning, achieving gains of +16.9 F1 and +21.0 Top-1 diagnostic accuracy over GPT-4o. Our code and dataset can be found at https://github.com/zhentingsheng/Note2Chat.
研究动机与目标
- 利用现成的医疗笔记来监督基于 LLM 的病史采集与诊断。
- 通过笔记转对话的管道,将笔记转换为真实的医生-患者对话。
- 开发三阶段微调策略(SFT、自我增强、DPO)以优化对话质量和效率。
- 引入单轮推理范式以实现可解释、上下文感知的轮次和局部监督。
- 展示相较基线,在信息获取与诊断准确性方面的显著提升。
提出的方法
- 建立一个以笔记驱动的对话生成与 refinement 流程,基于 MIMIC-IV 笔记产出 8,944 组来自 4,972 名患者的合成对话。
- 应用三阶段微调策略:对笔记引导对话的监督微调、轨迹采样的自我增强、直接偏好优化(DPO)。
- 引入对话级奖励函数以奖励信息回忆、诊断在前五名的排名,并惩罚过长的对话(R(tau) 公式)。
- 通过在轮次之间插入 <think> 块实现单轮推理,提供记忆摘要与计划,从而实现逐轮监督与奖励。
- 将完整对话分解为单轮交互以获取额外训练数据,并对高/低质量偏好对应用轮次级 DPO。

实验结果
研究问题
- RQ1现有的 LLM 在病史采集与多轮诊断对话中的表现如何?
- RQ2Note2Chat 在笔记派生监督下,是否能改进主动提问和自主诊断决策?
- RQ3微调与偏好学习在多大程度上弥合与人类临床医生的差距?
- RQ4以笔记为引导的单轮推理模型是否能在病史采集与诊断方面达到甚至超过多轮基线?
主要发现
- Note2Chat-MT 与 Note2Chat-ST 在评估数据集上的病史采集与诊断工作中超越所有基线。
- Note2Chat-ST 达成 46.1% F1、46.2% Recall、54.5% Precision,Top-1 70.0%,平均轮次 17.3。
- Note2Chat-MT 达成 43.8% F1、55.4% Recall、41.8% Precision,Top-1 62.0%,平均轮次 27.5。
- 在使用 SFT、自我增强与 DPO 微调后,Base Qwen2.5-7B-Instruct 展示显著提升。
- GPT-4o 和 Gemini-2.5-flash 初始性能虽更高,但在微调后 Note2Chat 模型超越它们,尤其在 Recall 和 Top-K 精确度方面。
- 单轮推理在效率上更优,与多轮相比用更少轮次也能达到较高性能。

阅读本论文
在 Nubint 阅读器中打开原文,边读边就任意段落提问。
在 Nubint 中阅读本论文本解读由 AI 根据论文原文生成,引用前请核对原文。