论文

PsychAgent:面向自我演化心理咨询师的经验驱动终身学习智能体

PsychAgent: An Experience-Driven Lifelong Learning Agent for Self-Evolving Psychological Counselor

模型训练上下文与知识智能体系统持续学习记忆Agent SkillsAgent记忆

摘要

现有AI心理咨询师方法主要依赖使用静态对话数据集的监督微调。然而,这与人类专家形成对比——后者通过临床实践与经验积累持续提升专业水平。为弥合这一差距,我们提出面向心理咨询的经验驱动终身学习智能体(PsychAgent)。首先,我们建立专为纵向多会话交互设计的记忆增强规划引擎,通过持久记忆与策略性规划保障治疗连续性。其次,为支持自我演化,我们设计了技能演化引擎,从历史咨询轨迹中提取基于实践的新技能。最后,我们引入强化内化引擎,通过拒绝采样微调(rejection fine-tuning)将演化出的技能融入模型,以提升多种场景下的表现。对比分析显示,我们的方法在所有报告的评估维度上都取得高于强通用LLM(如GPT-5.4、Gemini-3)及领域专属基线的分数。这些结果表明,终身学习能提升多会话咨询回复的一致性与整体质量。

PsychAgent:面向自我演化心理咨询师的经验驱动终身学习智能体:论文配图
图 1:PsychAgent 的整体架构,这是一个经验驱动的心理咨询终身学习框架。该系统通过协同闭环机制运行: (a) 记忆增强规划引擎通过对动态客户资料进行推理并制定战略目标,确保纵向疗程中的治疗连续性; (b) 技能进化引擎管理治疗技术的分层存储库,支持实时情境感知检索和新技能的会后抽象; (c) 强化内化引擎通过拒绝微调来巩固这些能力,其中选择最佳轨迹将显性技能转化为模型的内生直觉。