论文

状态在哪里?有状态Agent的执行信息需求

Dude, Where's My State? Execution Information Requirements for Stateful Agents

智能体系统上下文与知识记忆Agent任务评测Agent记忆

摘要

长时间运行的Agent必须保留后续步骤所依赖的信息。我们引入了执行信息要求(EIR),这是在指定任务和访问条件下必须保持可访问性以正确完成的信息的下限。我们开发了 LACUNA,这是一个框架,它生成具有已知依赖性的任务,并根据各个操作的难度分别改变信息需求、保留和恢复。在四个模型中,恢复缺失结果可将受影响的召回步骤的准确性提高到 100%,而同等长度的不相关信息的准确性为 0%。仅拥有足够的存储并不能确保成功:保留策略可能会丢弃所需的结果,错误可能会通过以后的计算传播,并且Agent可能会在恢复完成之前停止。我们还介绍了 VESTIGE,它使用Agent执行跟踪来构建语义图并测量实际任务的信息需求。在 72,562 个软件Agent轨迹中,VESTIGE 揭示了失败运行的解决方案相关重读与距离相关的急剧下降(每距离加倍 RR 0.951),而调整后的峰值需求本身与失败无关。这些贡献共同支持评估Agent是否保存和恢复其任务所需的信息。