论文

PanDent:实现牙科放射学中全面的牙齿水平结构语言一致性

PanDent: Toward Comprehensive Tooth-Level Structure-Language Consistency in Dental Radiology

模型评测基准与评测资源

摘要

由于缺乏反映专家解释的细粒度、临床可靠的基准,牙科全景放射摄影(正射断层摄影,OPG)中多模态 大语言模型 (MLLM) 的准确评估受到限制。这项工作介绍了 PanDent,这是一个基于细粒度、经过专家验证的牙齿级注释构建的大规模、基于临床的 OPG 基准。该数据集包含 9,524 个高质量 OPG,每个 OPG 都与经验丰富的牙医生成的全面结构化注释相关联,并由口腔颌面放射科医生进一步验证,为牙齿级诊断和推理提供临床可靠的监督。临床一致的放射学报告是根据专家验证的结果使用临床医生定义的报告逻辑构建的,在结构化临床证据和自由文本描述之间建立明确的对应关系。这种设计能够评估 MLLM 生成的报告是否不仅在语言上一致,而且在临床上与专家验证的牙齿水平结果一致。实验在不同的 MLLM 上进行,包括最先进的 (SOTA) 专有模型、通用领域开源模型和医疗特定模型。结果表明,当前的 MLLM 可以生成流畅的报告,但无法生成临床上一致的描述,在细粒度定位和牙齿级别诊断中表现出重大错误。 PanDent 上的 微调 显着提高了结构语言的一致性,大大提高了视觉定位的准确性和诊断的正确性,并使模型输出更接近专家的牙科解释。这些结果将 PanDent 确立为评估 MLLM 中牙齿级临床推理的严格基准,以及临床基础牙科 AI 的宝贵资源。