论文

X-PCR:眼科诊断中跨模态渐进式临床推理的基准

X-PCR: A Benchmark for Cross-modality Progressive Clinical Reasoning in Ophthalmic Diagnosis

模型评测基准与评测资源

摘要

尽管多模态 大语言模型 (MLLM) 取得了重大进展,但其多模态诊断的临床推理能力在很大程度上仍未得到检验。目前的基准大多是单一模态数据,无法评估临床实践所必需的渐进推理和跨模态整合。我们引入了跨模态渐进式临床推理(X-PCR)基准,这是首次通过完整的眼科诊断工作流程对 MLLM 进行综合评估,具有两个推理任务:1)跨越图像质量评估到临床决策的六阶段渐进推理链,2)集成六种成像模态的跨模态推理任务。该基准包括 26,415 张图像和 177,868 个经过专家验证的 VQA 对,这些 VQA 对来自 51 个公共数据集,涵盖 52 种眼科疾病。对 21 个 MLLM 的评估揭示了渐进推理和跨模式集成方面的关键差距。数据集和代码:https://github.com/CVI-SZU/X-PCR。