论文

用于混合格式医疗 VQA 的具有排列稳定专家的候选扩展路由

Candidate-Expanding Routing with Permutation-Stabilized Experts for Mixed-Format Medical VQA

模型推理推理验证与自校正

摘要

混合格式医学视觉问答 (VQA) 需要稳定的选项选择和机器可读的自由文本输出。这两种格式的失败方式不同:多项选择预测可能会随着选项符号或位置的变化而变化,而当序列化格式错误时,临床上合理的开放答案可能会无法自动评估。我们通过答案文本记忆、排列稳定的视觉语言专家和稀疏候选扩展路由器来解决这两个挑战。循环时间表遵循先前的工作;我们的贡献是使 Expert Top-2 成为与内存和 Expert Top-1 一起可路由的候选者。在 1,403 个案例的回顾性内部分析中,此扩展将匹配的二进制路由器从 88.95% 提高到 91.73%(+2.78 个百分点;95% CI 1.57--3.99),其中 56 个错误被挽救,17 个回归。 Oracle 覆盖率从 90.31% 上升到 96.15%,在同一回顾性拆分中最终提交的配置达到 92.23%。对于开放问题,严格的生成和确定性防护会生成 475/475 模式有效的面向参与者的输出,而无需修复、重试或硬门故障。视觉消融揭示了严重的文本依赖性。候选扩展提供主控路由增益;开放路径证据确立了输出合同的有效性,而不是医疗使用或部署中的临床正确性。