科学乌托邦？学术研究生态系统的闭环大语言模型模拟

科学进步产生于研究人员、机构、资助机构、合作网络和科学文献共同发展的纵向生态系统。随着人工智能越来越多地参与整个科学研究周期，理解这些相互关联和不断发展的过程变得越来越重要。我们介绍 SciUtopia，这是一个持久的闭环 LLM Agent模拟框架，用于研究学术研究生态系统。 SciUtopia 模型将研究方向选择、合作、提交、同行评审、重新提交、引用、资助和研究人员消耗等科学过程相互关联，同时在模拟年份中保持不断变化的状态。其可配置的制度机制和信息渠道为匹配的反事实实验和有针对性的干预措施提供了受控的测试平台。 SciUtopia 在 61 个模拟世界中模拟了来自 8,000 个机构的 40,000 多名研究人员，产生了约 400,000 个发表决策和 120 万个大语言模型生成的同行评审。使用这些纵向模拟，我们发现拒绝驱动的重新提交大大增加了审稿人的负担，而不仅仅是人口增长，谨慎的探索平衡了引用影响与职业成功和长期主题多样性，即使没有通过微弱优势赢得早期资助而产生可检测的累积优势，资源不平等也可能出现。代码可在 https://github.com/Ahren09/ScienceUtopia. 获取