论文
诊断视频生成中不可逆过程的演变不足
Diagnosing Under-Development of Irreversible Processes in Video Generation
摘要
许多物理属性具有不可逆性,例如冰融化后不会自动重新冻结,纸烧焦后不会恢复。本文研究视频生成器是否遵守这一规律,并发现可靠衡量的对象是属性演变,而非局部逆转。局部逆转指标在空基线下退化:单段违规率对纯噪声也给出0.50,方差归一化逆转残差达到噪声上限。通过空基线检查的是由进展(方向性属性相关)和停滞率组成的协议。该协议能区分生成视频与真实视频,差距经人工验证。七个文生视频模型的测试中,真实参考视频显示正向进展(ρ=+0.40、停滞率35%),所有生成器的进展接近零,停滞率为92%–100%。九名标注者在0–4分尺度上给真实视频2.75分、生成视频0.99分。可靠发现是演变不足:生成器很少推进不可逆属性,而不是将其逆转。机制分析进一步显示,事后读出引导可被投机利用;在解耦的属性潜变量中直接施加单调性,则消除了这一可投机读出,结果在受控和半合成设置中得到验证。