论文
VIALS:生命科学制品视觉解读基准
VIALS: A Benchmark for Visual Interpretation of Artifacts in the Life Sciences
摘要
在专业生命科学工作流中,科学家经常解读视觉制品(凝胶印迹、显微镜图像、质粒图谱、流式细胞术图、分子结构等)来支持研究决策。我们提出VIALS,一个包含161项此类解读任务的视觉问答基准,涵盖生物技术行业实验工作流中所检查的制品类型(而非出版物和教科书中的精美插图)。尽管前沿视觉语言模型如今能流畅描述自然图像,我们发现它们无法准确解读这些科学图像,反映出领域知识和领域特定视觉推理能力的局限。相比之下,具有相关领域专长的科学家认为这些视觉解读任务很简单。无法类似解读此类图像的AI在专业生命科学工作流中的效用将很有限,因为这些制品是科学家推理、交流和决策的核心。
