论文

对话式搜索中查询重写的多方面自洽偏好对齐

Multi-Faceted Self-Consistent Preference Alignment for Query Rewriting in Conversational Search

模型训练偏好优化

摘要

会话查询重写(CQR)旨在重写不明确的查询以实现更高效的会话搜索。早期的研究主要集中在孤立的重写上,忽略了重写过程中查询重写、段落检索和响应生成的反馈。为了解决这个问题,我们提出了多方面自洽偏好对齐 CQR (MSPA-CQR)。具体来说,我们首先从三个维度(重写、检索和响应)构建自洽的偏好对齐数据,以生成更多样化的重写查询。然后,我们提出前缀引导的多方面直接偏好优化,从三个不同的维度学习偏好信息。实验结果表明,我们的 MSPA-CQR 在分布内和分布外场景中均有效。