论文

VIALS:生命科学制品视觉解读基准

VIALS: A Benchmark for Visual Interpretation of Artifacts in the Life Sciences

模型评测基准与评测资源

摘要

在专业生命科学工作流中,科学家经常解读视觉制品(凝胶印迹、显微镜图像、质粒图谱、流式细胞术图、分子结构等)来支持研究决策。我们提出VIALS,一个包含161项此类解读任务的视觉问答基准,涵盖生物技术行业实验工作流中所检查的制品类型(而非出版物和教科书中的精美插图)。尽管前沿视觉语言模型如今能流畅描述自然图像,我们发现它们无法准确解读这些科学图像,反映出领域知识和领域特定视觉推理能力的局限。相比之下,具有相关领域专长的科学家认为这些视觉解读任务很简单。无法类似解读此类图像的AI在专业生命科学工作流中的效用将很有限,因为这些制品是科学家推理、交流和决策的核心。

VIALS:生命科学制品视觉解读基准:论文配图
图1:VIALS 基准中的三项任务。(左)抑菌圈工件描绘含有生长微生物的琼脂平板,该任务要求识别盘周围显示抗生素活性的清晰区域——这是抗生素发现和临床微生物学中的常见评估。(中)FACS 点图工件可视化流式细胞实验的结果以表征细胞群体,该任务要求识别特定生物标志物的细胞检测事件——这是免疫学研究和细胞疗法开发中的关键步骤。(右)蛋白质-配体复合物工件是结构生物学软件的3D可视化,显示分子如何嵌入蛋白质,该任务要求识别促成结合的分子接触——这是基于结构的药物发现中的关键步骤。对于每项任务,底部展示了各模型答案的正确性(从左到右依次为 GPT-5.6 Sol、Kimi K3、Gemini 3.1 Pro、Claude Opus 5 和 Grok 4.6)。