论文
ABot-PhysWorld:具有物理对准的机器人操作的交互式世界基础模型
ABot-PhysWorld: Interactive World Foundation Model for Robotic Manipulation with Physics Alignment
摘要
基于视频的世界模型为具身模拟和规划提供了强大的范例,但由于对通用视觉数据和忽略物理定律的基于可能性的目标进行训练,最先进的模型经常会产生物理上难以置信的操作,例如物体穿透和反重力运动。我们推出了 ABot-PhysWorld,这是一个 14B 扩散 Transformer 模型,可生成视觉逼真、物理合理且动作可控的视频。它建立在包含 300 万个带有物理感知注释的操作剪辑的精选数据集的基础上,使用基于 DPO 的新型 后训练 框架和解耦鉴别器来抑制非物理行为,同时保持视觉质量。并行上下文块可以实现跨实施例控制的精确空间动作注入。为了更好地评估泛化性,我们引入了 EZSbench,这是第一个独立于训练的零样本基准,结合了真实和合成的看不见的机器人任务场景组合。它采用解耦协议来单独评估物理真实性和动作对齐。 ABot-PhysWorld 在 PBench 和 EZSbench 上实现了最先进的性能,在物理合理性和轨迹一致性方面超越了 Veo 3.1 和 Sora v2 Pro。我们将发布EZSbench以促进具体视频生成的标准化评估。