论文

Visko Orbis 1.0:实时交互式长视频生成的实时模型

Visko Orbis 1.0: A Live Model for Real-Time Interactive Long Video Generation

应用与实践内容创作

摘要

我们推出了 Visko Orbis 1.0,这是一个用于实时、交互式长视频生成的实时模型。用户可以在生成过程中随时更改提示,并且更新实时可见。 Visko Orbis 1.0支持长文本转视频、图像转视频和视频续传,具有多语言提示和生成过程中的提示切换。有界的多尺度内存可以跨块保留主题、场景和风格,维持小时尺度的滚动,而不会出现明显的质量或颜色漂移。生成器按时间进行因果分解,与物理动力学的因果结构相匹配,并与预测一致性的潜在世界模型奖励保持一致。 Visko Orbis 1.0 基于精炼的分块流生成器和流视频升级器而构建,使用优化的 GPU 服务引擎以 24 FPS 实时生成 4K 视频。在定量评估中,Visko Orbis 1.0 实现了最佳的 DOVER 美学和技术分数以及最佳的 VideoAlign 视觉和运动质量,并领先于三个物理合理性协议(VideoPhy-2、Physics-IQ 和 VBench-2.0 物理);在长篇 Arena 比较中,它在所有最先进的实时交互式视频生成系统中获得了最高的总体偏好和时间稳定性评级。