陌生人、粉丝还是同伴？基于角色的对话生成中对话者角色的系统研究

基于角色的对话系统通常以说话者的传记为条件，但对话至少涉及两个参与者，并且谁有权访问谁的传记可能会因训练、推理和评估而异。之前的工作常常忽略了这些方面，模糊了只有当传记可见性在训练、推理和评估之间单独切换时才会出现的机制，这是之前的工作在很大程度上将其视为单个因素的三阶段分解。我们在与说话者传记配对的对话数据集上研究这种因式分解，改变目标说话者和对话者说话者在训练和推理过程中是否看到彼此的传记，并使用 LLM 作为判断者来执行作者识别。我们发现（i）训练时的可见性，而不是推理时的可见性，决定了模型是通过对话表达角色特征还是依靠复制传记文本（基于角色的生成中的已知问题/现象）； (ii) 使用对话者传记可见性训练的模型比没有训练的模型复制更少的目标传记文本，而仅在推理时改变可见性的效果不太一致； (iii)在非对称披露下，只有对话者看到目标传记，目标内容更容易泄漏到对话者轮次中，并且包含此类痕迹的对话更容易被法官识别，特别是当对话者轮次可见时。这些结果表明，传记泄漏到生成的回合中是对话者可见性在训练和推理中如何配置的人为因素，因此有必要将这三个阶段分开。