论文

AI能力正在指数增长吗?一个竞争性假说

Are AI Capabilities Increasing Exponentially? A Competing Hypothesis

模型评测模型行为与机制分析

摘要

快速增长的AI能力具有重大的现实影响,涵盖从AI安全关切到劳动力市场后果。Model Evaluation & Threat Research(METR)报告认为,AI能力自2019年以来呈现指数增长。在本简评中,我们认为数据并不支持指数增长,即使在较短的时间范围内也是如此。METR研究声称,拟合sigmoid/logistic曲线会得到遥远的未来拐点;而我们把sigmoid曲线拟合到其当前数据,发现拐点已经过去。此外,我们提出一个更复杂的模型,把AI能力分解为基础能力与推理能力,两者各自呈现不同的提升速率。我们证明该模型支持我们的假说,即AI能力将在不久的将来出现拐点。我们的目标不是建立我们自己的严格预测,而是凸显现有指数增长预测的脆弱性。

AI能力正在指数增长吗?一个竞争性假说
图2:Sigmoid连接函数的拐点。曲线与图3中相同;我们用相应颜色的虚线竖线标出橙色和绿色曲线的拐点。