HxAgent：用于端到端 Web 应用程序测试的迭代代理规划

在自动化 Web 测试中，生成测试用例并使用自然语言的功能描述执行测试对于提高效率至关重要。这些任务需要这样的测试代理在目标应用程序上执行任务并自主生成测试。我们引入 HxAgent，这是一种基于 LLM 的迭代规划代理，具有主动修正策略。每个步骤之后，HxAgent 都会重新评估网络状态，以便使用 (1) 当前观察、(2) 过去操作的短期记忆以及 (3) 从过去（不正确）的操作序列中提取的长期经验来确定下一步操作。 HxAgent 在 MiniWoB++ 上实现了 97.4% 的精确匹配准确率，与未经人类演示的最佳基线相当，并且比最近的 WALT 提高了 10.5%。在 350 个 Web 任务的数据集上，它获得了 83.8% 的精确匹配和 91.8% 的前缀匹配，超过 WALT 13.4%。在 OnlineMind2Web 上，它比 WALT 进一步提高了 4.6%。