论文

Vidu S2:实时交互式、可编辑的空间视频生成

Vidu S2: Real-Time Interactive, Editable, and Spatial Video Generation

应用与实践内容创作

摘要

我们推出Vidu S2,它包括Vidu S2-Avatar(实时交互式数字角色模型)和Vidu S2-Editing(实时视频编辑模型)。此外,我们还探讨了 Vidu S2-Avatar 和 Vidu S2-Editing 实时空间视频生成的可行性。与Vidu S1相比,Vidu S2-Avatar支持实时720p视频生成,生成可随时更新的动态参考,并且具有更强的指令跟随性,例如跳舞。 Vidu S2-Editing支持对视频流进行实时编辑,包括风格渲染、服装更换、人物更换、背景更换等。实验表明 Vidu S2 的性能优于所有基线。可在 https://vidu.com/vidu-stream 上获取可玩的在线演示。