MedGemma 1.5技术报告

我们介绍MedGemma 1.5 4B，MedGemma系列的最新模型。MedGemma 1.5在MedGemma 1的基础上扩展，集成了更多能力：高维医学影像（CT/MRI体数据与组织病理学全切片图像）、经边界框实现的解剖定位、多时间点胸部X光分析，以及改进的医学文档理解（化验报告、电子健康记录）。我们详细说明了在单一架构中启用这些模态所需的创新，包括新的训练数据、长上下文3D体数据切片与全切片病理采样。与MedGemma 1 4B相比，MedGemma 1.5 4B在这些新领域展现出显著提升：3D MRI疾病分类准确率提高11%，3D CT疾病分类提高3%（绝对提升）。在全切片病理影像方面，MedGemma 1.5 4B取得47%的macro F1增益。此外，它改进了解剖定位，胸部X光上的交并比（IoU）提高35%，并在纵向（多时间点）胸部X光分析上取得4%的macro准确率。除了相对MedGemma 1的多模态性能提升，MedGemma 1.5还改进了基于文本的临床知识与推理，MedQA准确率提高5%，EHRQA准确率提高22%。它还在4个不同的化验报告信息抽取数据集（EHR Datasets 2、3、4与Mendeley Clinical Laboratory Test Reports）上取得平均18%的macro F1。综合来看，MedGemma 1.5作为面向社区的稳健开放资源，被设计为一个改进的基础，开发者可据此构建下一代医学AI系统。基于MedGemma 1.5进行构建的资源与教程可参见 https://goo.gle/medgemma。