论文

OpeFlo:通过模拟人网交互与 GUI 基础进行自动化 UX 评估

OpeFlo: Automated UX Evaluation via Simulated Human Web Interaction with GUI Grounding

摘要

评估网络可用性通常需要耗时的用户研究和专家评审,这通常会限制产品开发过程中的迭代速度,特别是对于小型团队和敏捷的工作流程。我们推出了 OpenFlo,这是一种用户体验评估代理,可以模拟网站上的用户行为并产生标准化的可用性。与依赖 DOM 解析的传统工具不同,OpenFlo 以操作和观察为基础,使其能够与真实网页进行端到端交互,同时保持用户旅程的连贯跟踪。我们的系统以 Avenir-Web 为基础,将这种强大的交互与模拟用户行为档案和结构化评估协议相结合,该协议集成了系统可用性量表 (SUS)、逐步单一轻松问题 (SEQ) 和并发 Think Aloud。随后,将生成全面的用户体验(UX)报告。我们讨论了 OpenFlo 的架构,并说明了其多模态基础如何提高基于 Web 的交互和 UX 评估场景的稳健性,为持续、可扩展和数据驱动的可用性测试的新时代铺平道路,使每个开发人员都能够构建可用的 Web 界面。代码位于:https://github.com/Onflow-AI/OpenFlo

OpeFlo:通过模拟人网交互与 GUI 基础进行自动化 UX 评估
图 3. Recreation.gov 任务执行工作流程显示五个阶段的双峰性能。绿色框表示成功的相互作用(SEQ ≥ \geq 6.5),黄色框表示摩擦点(SEQ ≤ \leq 3.3),导致 SUS 得分为 55.0/100.0。