论文

RoutePrism:跟踪Agent内存中的构造顺序影响

RoutePrism: Tracing Construction Order Effects in Agent Memory

模型评测上下文与知识记忆评测方法与指标Agent记忆

摘要

以不同的顺序处理相同的记录可能会丢弃不同的证据,但仅端点准确性无法揭示发生了什么变化或它是否重要。我们引入了 RoutePrism,这是一种诊断协议,它以两个处理顺序从同一源池构建两次内存,然后跟踪哪些源、已编译上下文和答案不同。由于记录内容、时间戳、策略和答案模型都保持固定,因此任何观察到的差异都局限于内存构建步骤。匹配的四条件干预测试因重新排序而移位的记录是否确实携带与任务相关的证据:恢复该单个记录可以恢复超过 60 个百分点的准确性损失,而替换相同长度的非支持记录则不能。我们评估了 PersonaMem-32K(63 个主要查询,29 个用户)和 470 个 LongMemEval-S 问题(历史跨越 38 到 62 个会话)的协议,在五个答案模型中复制了核心干预。幸存者选择(定义为集群保留哪些记录的选择)驱动大多数源级别的更改,而不同的内存策略(压缩、有界新近度、MemoChat 式摘要、A-MEM)会在源、上下文和元数据层产生不同的故障签名。