论文

面向推理时论证的神经符号学习

Neurosymbolic Learning for Inference-Time Argumentation

模型推理推理策略与问题分解

摘要

主张验证是包括健康与金融在内的高风险场景中的重要问题。当支撑主张的信息不完整或相互冲突时,给出不确定的回答可能比二元的真假分类更合适。在任何情况下,对决定最终判定的考量给出忠实解释都至关重要。我们提出推理时论证(ITA),一个用于三值主张验证的可训练神经符号框架:给出主张强度的形式论证语义既用于(i)指导LLM训练——模型学习生成论证并为其赋基础分(代表内在强度),也用于(ii)从生成并已打分的论证计算三值(真/假/不确定)预测。由此,在训练时,论证生成与打分可以依据所诱导论证预测的质量来优化。此外,在推理时,最终预测按构造即忠实于决定判定的论证与分数,而不像常规推理模型那样由可能不忠实的事后推理痕迹来辩护。最后,我们在两个三值主张验证数据集上表明,ITA优于论证式基线,并能与非论证的直接预测基线相竞争,同时其判定由显式、可检查的论证结构确定性地计算得出。

面向推理时论证的神经符号学习:论文配图
图 1:改编自 DEBATunE 的权利要求论证结构示例(Li 等人,2024a)。论点 1-3 攻击该主张,论点 4-6 支持该主张。对于主张/论点 xx,τ⁡(x)\tau(x) 是基本分数,σ⁡(x)\sigma(x) 是由 DF-QuAD 语义计算的论证强度 (Rago et al., 2016)。 ITA 将此声明归类为“不确定”,因为其强度接近 [0,1] 的中点。