论文

JustDiag!:用于负责任根本原因分析的诊断论证引擎

JustDiag!: A Diagnostic Justification Engine for Accountable Root Cause Analysis

智能体系统Agent 架构与控制循环

摘要

大语言模型 可以产生流畅的根本原因分析,但仅流畅的最终答案并不足以证明高风险操作中的问责制。在实际的事件响应中,工程师需要知道哪些证据支持诊断,考虑了哪些替代方案,哪里仍然存在矛盾,以及系统是否解决了问题或保留了不确定性。我们通过 JustDiag 解决了这一差距,JustDiag 是 RCA 的诊断论证引擎,可在证据、发现、竞争假设、冲突和下一步检查方面保持明确的流程状态。我们使用两层协议对 66 个现实事件的系统进行了评估,该协议分别对最终答案质量和过程质量进行评分。相对于没有诊断依据的匹配对照,JustDiag 获得了更强的结果和过程分数,同时由于更校准的非封闭性而接受略低的终端完成度。这些结果表明,负责任的 RCA 需要明确的诊断论证工件和流程感知评估,而不仅仅是流畅的最终答案。