论文

人类会退出、推理模型会坚持:分离难度登记与深思分配

Humans Disengage, Reasoning Models Persist: Separating Difficulty Registration from Deliberation Allocation

模型评测模型行为与机制分析

摘要

大型推理模型(LRM)倾向对人类也花更多时间的问题产生更长的推理踪迹。这种对应提示对难度的共享敏感性——但困难问题既可引发坚持也可引发退出。我们区分难度登记(表现为哪些问题引发更多深思)与后续工作的分配。我们在视觉抽象、直觉物理与关系推理的匹配人类与LRM数据中考察两者关系。在视觉抽象上——模型踪迹长度追踪人类按用时的问题排序。在控制题目身份后——成功的人类尝试比失败尝试持续更久——而失败LRM尝试的踪迹长于成功的(合并模型分析)。估计的结果斜率在直觉物理上遵循相同模式。在关系推理中——分离的人类与模型分析中成功尝试更长。以共享题目效应拟合两组产生人类-LRM在用时与结果关系上的差异。人类网格动作把更长尝试与持续任务投入相连。失败LRM踪迹在控制长度后包含更多对冲或重复——差异形式随任务而变。资源理性解释说明:不确定性的预期可约简性与赋予后续计算的价值如何能在难度敏感性相似时产生不同的坚持模式。因此——对哪些问题需要更多深思的共识可以与对这些问题的不同坚持模式共存。

人类会退出、推理模型会坚持:分离难度登记与深思分配:论文配图
图 S1:H-ARC 分配间隙的稳健性检查。 (a) H-ARC 上 LRM 推理标记长度与人类反应时间之间的跨项目 Spearman 相关性。 DeepSeek-V3 是非思考基线,没有显示出正相关性。 (b) 按难度四分位划分的 LRM d 比率。标记为“NA”的单元格的正确或错误试验少于 5 次,因此没有报告 d 比。 (c) 试验级(初级)和项目级操作下的人力 d 比率。项目级对比按发布的准确度等于或低于 50%50\% 与高于它的情况对项目进行分组。