论文

检索器能覆盖全部证据吗?跨页合取条件检索的受控研究

Do Current Retrievers Cover All the Evidence? A Controlled Study of Conjunctive Cross-Page Retrieval

模型评测模型能力评测

摘要

找到与多部分请求相关的长文档,不等于证明该文档包含所需的全部证据。论文研究合取条件检索:一个文档的不同页面需要共同支持两至三个明确条件。n-Clue 包含针对 2021 篇文档的 1000 个查询,把满足全部条件的标准文档与自然存在的仅满足部分条件文档配对;完整文档优先的成功条件为,排名前十的标准文档排在所有已标注的部分条件相关文档之前。七十种配置中,按条件分解使两个稠密检索主干提高 6.8–7.3 个百分点,词汇—视觉融合再提高 8.7 个百分点;四种通用重排器均降低 Gold-NDCG,这些方向在四来源压力集上复现。将一组稠密模型从 0.6B 扩大到 8B,完整文档优先成功率变化为零。展示的最强混合配置在 81.1% 查询中找到标准文档,却仅在 35.8% 查询中满足完整文档优先;差距在不同条件数量、目标长度、候选密度、查询呈现方式及压力集上持续存在。页面感知视觉系统仅在 5.1%–5.3% 查询中返回全部条件的已存证据。主要瓶颈是条件覆盖,而不只是发现标准文档。