论文

PhysWeep:视频生成器能否实现您要求的物理效果?

PhysWeep: Does a Video Generator Realize the Physics You Ask For?

模型评测评测方法与指标

摘要

图像到视频生成器通常被认为将物理动力学吸收为隐式世界模型,社区目前正在检查合理性分数,询问剪辑看起来是否与现实世界的运动一致。合理性本身就是错误的测试,因为在编码控制物理参数的错误值时,剪辑可能看起来很自然,并且没有现有的基准测试直接测量这种差距。 PhysWeep 以固定的、无标签的审核来结束它,将冻结的生成器视为黑匣子,从生成的像素中恢复实现的参数,并报告生成可跟踪的​​频率、实现的值与请求的值相差多远,以及数据支持文献提出的两种故障机制中的哪一种(如果有的话)。确定性模拟器阳性对照确认每个分数都是完全可检查的。 PhysWeep 应用于六个扫描轴上的三个公开生成器,发现了一个特定的、可重现的、以前未记录的故障。在产生可跟踪运动的条件下,三个中的两个会生成自信的、拟合良好的动态,这些动态会收敛到采样种子而不是请求选择的少数固定错误值之一,在两个独立的模型系列、两个物理系统和一个独立的跟踪器中进行复制。它既不符合先前的回归也不符合文献预期的基于案例的限制,因为回归目标是种子条件的而不是单个全局默认值,并且留一选择规则拒绝两者;无论响应是可估计的,范围内的 忠实性 斜率在统计上都与零无法区分。对种子进行平均的基准永远不会看到这一点:每个样本都被自信地锁定为一个错误的常数,这正是合理性分数在结构上忽视的失败。我们发布了协议、套件和分析代码。