论文
代理交付工程预测可靠性框架
Agent Delivery Engineering Predictive Reliability Framework
摘要
长期 LLM 多代理系统面临着基础设施监控不可见的可靠性风险。我们提出了 ADE 预测可靠性框架 (ADE-PRF),通过被动退化检测实现主动健康轨迹预测。 ADE-PRF 将五层中的 20 个异构信号聚合为信任裕度 (TM) 指标(39.2 点动态范围)。三法并行预测可实现8小时预测:指数法MAE=1.228,方向精度=76.8%,99.65%在+/-10点误差范围内。生产验证涵盖连续 15 天的 6 个代理配置文件中的 380,227 项预测和 280,579 项验证,以及 7 个沙箱控制实验。主要发现包括检测“虚假繁荣”(正常表面指标掩盖的退化)以及在 ADE 插件集成时与 真值 状态立即进行 TM 耦合,其中 16/20 因子依赖于 ADE 收集的数据。指数始终优于卡尔曼。 ADE-PRF 为生产 LLM 代理提供最早的可靠性量化和前瞻性警告。