论文

经验记忆图:智能体的一次性纠错

Experience Memory Graph: One-Shot Error Correction for Agents

上下文与知识知识图谱记忆Context GraphAgent记忆

摘要

大语言模型(LLM)智能体通过生成状态、动作与观察的序贯轨迹,在自主决策上展现显著能力。但在复杂长程任务中,这些智能体常苦于复合错误,且难以从失败中恢复。既有的自纠正机制依赖基于提示的反思——天然脆弱、因迭代试错回路产生沉重的时间与API成本,并产出可能难以泛化到新场景的任务专属记忆。为此我们提出经验记忆图(EMG):一个把智能体失败恢复重构为图匹配问题的框架。训练时,我们把失败探索轨迹与成功专家轨迹都转为有向动作决策图;通过匹配这些图,抽取公共子图(成功工作流)与显式指示如何纠正失败的图编辑路径(例如在给定观察下应添加、删除或重标哪些动作),并把它们存入带任务内节点与跨任务边的记忆图。测试时,EMG检索相关洞见并引导智能体单次、无循环执行。ALFWorld与ScienceWorld上的实验显示:EMG在成功率与平均奖励上持续超越最先进的反思基线,同时无需测试时试错。

经验记忆图:智能体的一次性纠错:论文配图
图 1. 基于 (a) 反射重放循环和 (b) 经验内存图的纠错差异。现有方法依赖于迭代测试时反射——代理在每次失败后重新计划和重新执行,从而导致高延迟和成本。我们的经验记忆图通过计算图编辑路径来离线提取纠错路径,这些路径将同一任务的配对训练轨迹中的失败轨迹转换为成功轨迹,将它们提炼成见解,并将它们存储在记忆图中。在测试时,检索可以实现一次性执行而无需循环。