论文
表格数据文档索赔验证的多代理方法
A Multi-Agent Approach for Claim Verification from Tabular Data Documents
摘要
我们提出了一种从表格数据文档进行声明验证的新颖方法。最近基于 LLM 的方法要么采用复杂的预训练/微调,要么将验证分解为子任务,通常缺乏全面的解释和概括性。为了解决这些限制,我们提出了一个用于声明验证(MACE)的多代理框架,由三个专门的代理组成:规划者、执行者和验证者。每个代理都采用零样本思想链设置来执行其任务,而不是进行精细的微调。 MACE 生成可解释的验证轨迹,规划器生成显式推理策略,执行器提供详细的计算步骤,验证器验证逻辑。实验表明,MACE 在两个数据集上实现了最先进的 (SOTA) 性能,并且在另外两个数据集上的性能与最佳模型相当,同时使用更小的模型实现了 80--100% 的最佳性能:27--92B 参数与 235B 参数。这种竞争性能、内存效率和透明推理的结合凸显了我们框架的有效性。