论文

批准:使用 LLM 进行可视化最终用户在环机器人编程

APPROVE: Visual End-User-in-the-Loop Robot Programming with LLMs

智能体系统Agent 动作执行与治理

摘要

对于非专家来说,机器人编程仍然具有挑战性,因为传统方法需要专业知识,甚至基于块的接口也往往缺乏灵活性。最近的工作探索了 大语言模型 (LLM),以从自然语言自动生成机器人程序,但这些系统仍然受到缺乏透明度、缺少确保与用户意图一致的机制以及对重用支持很少的限制。我们推出了 APPROVE(具有视觉最终用户反馈的人工智能驱动的机器人编程),这是一种基于 LLM 的多模式最终用户编程框架,它将自然语言输入与基于块的界面和显式用户确认步骤集成在一起。生成的程序使用 Blockly 中基于块的界面进行可视化,允许用户在执行之前确认、修改或拒绝它们。确定的功能存放在库中供复用,逐步构建出一套可靠的程序组件。我们的方法为基于 LLM 的机器人编程提供了以人为本的设计,强调用户信任、意图一致和可重用性。