技术实践
扣子以Mobile Use Agent打通移动端操作
概述
扣子(Coze)作为平台型 Agent 产品接入火山引擎 Mobile Use Agent,把原本只能停留在文本生成与流程编排的 Agent 扩展到真实移动端任务执行。分工上,平台侧负责用户入口、任务理解、知识调用、工作流编排、业务逻辑与多工具协同。Mobile Use Agent 在云手机环境中识别页面状态,执行点击、输入、滑动、跳转等操作,并处理等待、异常、弹窗与重试,同时返回截图、日志、过程记录与执行结果,从而补齐从任务理解到结果交付的最后一公里。 文中列出四类落场景:账号运营 Agent(进入 App 填写内容、选择素材、预览并正式发布,形成从内容生产到分发的闭环)、移动 App 自动化测试 Agent(用自然语言描述测试目标,在云手机中执行并返回执行过程、关键截图与失败原因,把测试从脚本维护转向任务描述)、内容审核与质检 Agent(按规则进入页面查看内容、截图留痕并输出判断,可打包为「规则理解+页面执行+结果归档」行业方案)、业务流程执行 Agent(订单处理、线索录入、客户信息查询、跨 App 数据搬运等无统一 API 的重复移动端操作)。 文中同时强调支付、删除、发布、敏感信息提交等高风险动作仍需权限控制、人工确认与审计,不追求完全无人介入。扣子云手机功能目前在扣子高阶版和旗舰版及以上版本限时免费体验。