论文
OpenIIR:用于信息检索研究的开放仿真平台
OpenIIR: An Open Simulation Platform for Information Retrieval Research
摘要
OpenIIR 运行数百个 LLM 驱动的角色作为参数化、可重复的 IR 研究实验。研究人员在许多先验、回合和约束下,在四种多智能体研究(审议小组、社交平台、策划推荐源以及内容生产者和可信度检测器之间的进化共同进化)中配置智能体。角色预算、检索策略、排名选择、干预时间和突变率都是预先声明的,并且可以在不同的设置下重新运行相同的研究,以并排比较结果。每次运行都会产生下游评估器可以直接使用的结构化输出(参数图、暴露日志、健身轨迹、转录本),一项新研究是共享核心(代理运行时、世界模型存储、检索基元、声明提取器、角色本体)上的 200--400 行插件。这些贡献是: (i) 共享核心; (ii) 用于可插拔场景的类型接口; (iii) 四种已发布的带有参考运行的类型(Panel、社交媒体、Culated-Feed、Multi-Generation); (iv) 针对开放式 IR 研究问题勾勒出的六个模块扩展。