论文

SynWeaver:Web 代理的网站优先任务和轨迹协同合成

SynWeaver: Website-Prior Task and Trajectory Co-Synthesis for Web Agents

模型训练合成数据

摘要

网络代理通常很难推广到看不见的网站,因为他们缺乏针对特定网站的监管。最近基于探索的数据合成方法减少了手动注释,但它们仍然面临两个关键限制:它们往往无法覆盖网站的全部功能,并且在没有足够的网站先验知识的情况下,它们往往会提出幻觉任务,这反过来又限制了下游轨迹合成的多样性和效率。我们提出了 \textbf{SynWeaver},一个旨在解决这些挑战的网站优先任务轨迹协同合成框架。 SynWeaver 首先执行结构化网站探索并构建网站地图,该地图涵盖目标网站上广泛的功能不同的页面状态和可执行交互。然后,它从此映射中导出页面级和转换级监督,以训练具有网站特定先验的 UI 感知模型,从而实现更扎实的任务建议。最后,SynWeaver 执行协作任务轨迹合成,在任务和执行轨迹不一致时共同更新它们,然后验证和修复收集的结果以生成可执行的、语义对齐的监督。 WebArena 和 WebVoyager 上的实验表明,SynWeaver 始终优于强大的综合基线,并对域内和域外泛化产生更有效的监督。