论文
MTI:一种基于行为的AI智能体气质画像系统
MTI: A Behavior-Based Temperament Profiling System for AI Agents
摘要
能力相当的AI模型可能表现出根本不同的行为模式,但目前尚无标准化工具来测量这些性情差异。现有方法要么借用人类人格维度并依赖自我报告(在LLM中这与实际行为相悖),要么把行为差异视为缺陷而非特质。我们提出模型气质指数(Model Temperament Index,MTI),一个基于行为的画像系统,从四个轴测量AI智能体的气质:反应性(对环境的敏感度)、顺从性(指令与行为的对齐)、社交性(关系资源分配)和韧性(抗压能力)。MTI植根于模型医学的四壳模型(Four Shell Model),通过结构化检查协议测量智能体的实际行为而非其自我描述,其两阶段设计将能力与性情分离。我们对10个小语言模型(参数量1.7B-9B,来自6个机构、3种训练范式)进行画像,并报告五项主要发现:(1) 在指令微调模型中,四个轴基本相互独立(|r|均<0.42);(2) 实证确认了轴内子维度分离——顺从性分解为完全独立的形式与立场两个子维度(r=0.002),而韧性分解为负相关的认知与对抗子维度;(3) 顺从性—韧性悖论表明,让步观点与受事实影响通过独立通道运作;(4) RLHF不仅改变轴得分,还创造了未对齐基座模型中不存在的轴内子维度分化,以此重塑气质;(5) 气质与模型规模(1.7B-9B)无关,证实MTI测量的是性情而非能力。
