论文

一步一步:测量和指导 LLM 如何进行心理治疗

Move by Move: Measuring and Steering How LLMs Conduct Psychotherapy

模型评测评测方法与指标

摘要

用户越来越多地转向 大语言模型 寻求情感支持,但人们对这些模型实际上如何进行心理治疗互动知之甚少。我们引入了十个治疗举措的本体论:基于 MULTI-60 库存的紧凑、基于功能的类别,通过五位持证心理学家的注释活动进行验证,并使用符合专家共识的基于判断的方法进行扩展。将其应用到真实的咨询记录和模型主导的会议中,我们比较了人类临床医生和一组前沿模型之间的移动分布。模型以高达人类三倍的速度过度使用询问,忽视心理教育,并且具有很强的情境锚定性:它们继承了人类临床医生发起的策略,但很少自己发起。将本体作为一组工具公开,可以将人类移动分布的平均偏差大致减半,并将与人类治疗师的回合水平对齐提高 7-9 个百分点,而无需任何 微调。