论文

用语言模型模拟人类记忆

Simulating Human Memory with Language Models

模型评测模型能力评测

摘要

语言模型越来越多地被部署为用户模拟器,但它们的记忆比真实用户的记忆要可靠得多。为了衡量这一差距,我们对人类和语言模型进行了一系列心理学经典记忆实验。在各种任务中,我们发现开箱即用的语言模型表现出比人类更好的记忆力,即使在被提示模仿人类行为时也是如此。然后我们证明,更好的提示策略和压缩器的使用可以使语言模型以更类似于人类的方式忘记内容。使用这些方法,我们展示了初步证据,表明具有类人记忆约束的语言模型可以在下游教育任务中充当更有效的用户模拟器。最后,我们发布了人类参考数据和基准,以支持未来使用语言模型模拟人类记忆的工作。