论文

Beyond Compliance:面向挑战性心理来访者模拟的阻力感知动机推理框架

Beyond Compliance: A Resistance-Informed Motivation Reasoning Framework for Challenging Psychological Client Simulation

模型训练强化学习

摘要

心理来访者模拟器已成为训练和评估实习咨询师及心理LLM的可扩展方案。然而,现有模拟器表现出不真实的过度顺从,使咨询师面对真实执业中常见的挑战性行为准备不足。为弥合这一差距,我们提出ResistClient,它以来访者阻力理论(Client Resistance Theory)为基础,将外部行为与底层动机机制相结合,系统建模挑战性来访者行为。为此,我们提出阻力感知动机推理(RIMR),一个两阶段训练框架。首先,RIMR通过在RPC上进行监督微调来缓解顺从偏差;RPC是一个大规模、面向阻力的心理对话数据集,覆盖多样的来访者画像。其次,超越表层的响应模仿,RIMR在响应生成前建模心理上连贯的动机推理,通过过程监督强化学习联合优化动机真实性与响应一致性。大量自动与专家评估表明,ResistClient在挑战保真度、行为合理性和推理连贯性上显著优于现有模拟器。此外,ResistClient可支持在挑战性条件下评估心理LLM,为心理健康对话系统提供新的优化方向。

Beyond Compliance:面向挑战性心理来访者模拟的阻力感知动机推理框架:论文配图
图1:现有LLM来访者模拟器过度顺从,ResistClient通过动机推理步骤生成真实的抗拒行为,提升心理模拟真实性。