论文

ISE:基于执行的多轮操作系统代理轨迹配方

ISE: An Execution-Grounded Recipe for Multi-Turn OS-Agent Trajectories

模型训练合成数据

摘要

训练有能力的操作系统代理需要能够同时捕获结构化用户意图、多轮任务委托和基础工具执行的数据——现有数据集中缺少这些属性。我们提出了 ISE(意图 -> 模拟 -> 执行),这是一种三阶段综合范例,可以共同解决这些差距。第一阶段通过 4D 框架(角色 x 领域 x 任务 x 复杂性)构建大约 50000 个结构化意图;去重后,该池包含 43956 个唯一意图,并且整个池在 mpnet-base-v2 嵌入(余弦内核,q=1)上获得了 61.57 的 Vendi 分数。第 2 阶段通过角色锁定的用户模拟器驱动多回合用户代理交互,该模拟器将每个用户回合基于实际执行结果,产生 23132 个完整轨迹,平均 8.12 个用户回合和 68.24 个对话回合。第 3 阶段在实时、隔离的操作系统工作区中运行每个工具调用,生成真实的故障恢复动态而不是模拟响应。 ISETrace 上的 微调 在具有标准协议的代理工具使用任务上使用 Qwen3-8B 将 ClawEval pass@1 从 19.3 改进到 37.7。该结果优于零样本 GPT-4o 和更大的 Qwen3-32B 基础模型(其大小是其四倍)。第 2 阶段的消融证明多圈模拟带来了很大一部分性能增益。我们在 https://github.com/Valiere01/ISE-Trace 发布了所有源代码和数据集。