论文

VeriDx:以疾病为中心核验诊断推理的依据

VeriDx: Earning the Right to Diagnose with Disease-Centric Verification

模型评测评测方法与指标

摘要

正确的诊断仍可能基于错误的原因。在临床推理中,每种疾病假设都会产生义务:必须检查关键证据,排除其他可能性,解决矛盾,考虑有效检查,且必须提供结论的正当性。当前对医学大语言模型的评估主要关注最终答案、局部步骤或孤立事实,因而忽略了这些假设所引发的义务。我们提出了VeriDx,一种以疾病为中心的验证框架,将自由形式的诊断推理与结构化的疾病画像关联起来。VeriDx追踪每个假设是否满足、未解决或违反了其临床义务,暴露了诸如遗漏关键检查、未解决鉴别诊断、忽略矛盾、主张无依据以及过早闭合等失败情况。我们用指南导出的疾病画像及专家标注的纵向病例,在复杂呼吸系统诊断中实例化VeriDx。结果表明,许多诊断错误并非孤立失误,而是推理过程中早期形成的义务缺失。

VeriDx:以疾病为中心核验诊断推理的依据:论文配图
图 1:用于标准化诊断验证的以疾病为中心的 DDx 配置文件。传统的以病例为中心的LLM推理可以产生流畅且局部合理的临床叙述,但不一致地涵盖特定疾病的诊断义务。 VeriDx 引入了以疾病为中心的 DDx 配置文件,其中编码了每种疾病所需的证据、鉴别诊断、排除限制和治疗先决条件。这些资料可以根据临床指南和证据自动更新,并用于指导和审核LLM生成的推理。通过将自由文本诊断叙述映射到配置文件定义的义务上,VeriDx 可以实现跨案例的一致、可审核和安全意识验证。