论文

病理学基础模型的分布稳健性裕度

A Distributional Robustness Margin For Pathology Foundation Models

模型评测评测方法与指标

摘要

病理学基础模型对组织制备、染色和扫描引入的非生物变异进行编码,从而实现捷径学习,从而破坏了跨机构的泛化。鲁棒性指数(RI)被提出来评估局部表示几何是否由生物或非生物变异主导。然而,它的构造受到结构限制,使得跨模型比较不可靠,需要更有原则的度量。我们引入了交叉混杂因素鲁棒性裕度(CRoMa),这是一种带符号的每个样本裕度,用于衡量共享相同生物学但不同混杂因素的样本是否比共享相同混杂因素但不同生物学的样本更接近。它是为每个样本定义的,允许在同一队列上比较模型,并将稳健性作为分布进行分析,而不是简化为单个汇总分数。我们在三个基准测试中评估了 20 个图块级编码器的 CRoMa。按中位 CRoMa 进行的排名在基准之间高度一致(Spearman rho ~ 0.90),但每个编码器都保留了混杂因素主导的样本,其患病率和严重程度差异显着。在单独的基准上评估的四个幻灯片级编码器出现了类似的模式,将分析扩展到图块级表示之外。较高的 CRoMa 中值与下游线性探针中较小的捷径引起的性能损失相关,支持其用作捷径敏感性的代表性水平指标。