论文
实体冲突:用于归因代理内存中检索提升的分层协议
Entity-Collision: A Stratified Protocol for Attributing Retrieval Lift in Agent Memory
摘要
端到端代理内存基准测试报告每个 检索器 的单个 hit@k,混淆了词汇泄漏(不受控制的查询/黄金/干扰实体重叠)与标签混合(首选项、服务、工具平均在一起)。我们提出了实体冲突,这是一种与系统无关的协议,通过构造固定 BM25 层——每个干扰器共享答案的实体标记——并通过鉴别器标签对查询进行分层,因此任何超过 BM25 的提升都可归因于嵌入器。该协议应用于跨 5 个标签 x 3 个嵌入器 x 5 个碰撞度(具有配对引导 95% CI)的开源代理内存测试平台,揭示了一个两轴模式:256 维哈希三元组仅对深度碰撞时的封闭词汇词汇标签有帮助; MiniLM-384 主导两个轴; 2.7 倍参数的 BGE-large 并没有一致地改进 MiniLM——它在意图式查询上获胜,但在词法查询上失败。编码器容量本身并不是约束约束。合成意图标签 null 在 LongMemEval (n=500) 上复制作为单会话偏好召回悬崖。 LoCoMo 上的自适应矢量权重路由是一个测量值:存在 11.7pp 的预言机余量,但我们测试的信号没有恢复它。所有 26 个结果表和 37 个重现脚本均由公共注册表进行版本控制和验证;该协议在确定性管理的内存测试台(事件源决策日志、DAG 状态机模式生命周期)上执行,因此每个报告的 CI 都可以从摄取流中逐字节再现。