论文
使用来源感知证据图重建可审计的临床时间线
Auditable Clinical Timeline Reconstruction with Provenance-Aware Evidence Graphs
摘要
患者时间线重建系统只有在保留每个答案背后的提及、记录事实如何修改以及当证据不在文本中时拒绝回答时才是可审计的。本研究在完全合成的语料库(1,000 名患者、3,353 个注释、220 个修订边缘)上测试了这三个属性。两个来源感知的证据图运算符将节点加边计数减少到 67% 和 63%(序列化大小的 77-78%),同时保留 6,813 个按新近度回答的查询点中的每个答案和提及链接;固定窗口基线未返回 53.4% 的点的值,未标记。在宣布遗漏的证据不可用的控制中,BioClinicalBERT 门和零样本LLM门主要对这一声明做出反应。在无标记对照中,BERT 对 81 个音符中的 0 个弃权,而其在所有三个关系类别中的准确率从 93.8% 下降至 59.3%; LLM的覆盖率从 75.6% 下降到 27.7%,因为其自己的型号系列被判断为无法确定。对比482个再生金跨度,LLM的引用证据达到召回率 0.850和精度 0.864; BERT 的跨度头在没有跨度标签的情况下进行训练,没有定位证据。时间版本的起源图将弃权存储为类型化的、可查询的边。 clean 任务承认 0.651 准确度的捷径,结果描述的是合成数据上的实施行为,而不是临床表现。
