SkelGen4D：用于文本驱动网格动画的基于弱监督骨架的 4D 生成

我们研究 4D 生成，以合成时间连贯的 3D 几何序列，用于动画和内容创建。与现有的基于 SDS 的优化方法和视频驱动的动画方法相比，我们采用与标准工业流程一致的骨架驱动的动画框架，可以实现显式的控制和编辑。为此，我们提出了 SkelGen4D，这是一种用于文本驱动网格动画的弱监督前馈框架，可生成显式骨架运动，而不需要每帧骨架注释。 SkelGen4D 首先通过可微分拟合从动画网格中恢复时间一致的伪骨架，然后以前馈方式生成文本条件的骨架运动序列，并使用 Motion-GRPO 进一步细化，以确保时间连贯、物理合理且清晰的动画。我们在两个大型基准测试（Truebones Zoo 和 Diffusion4D）上评估我们的方法。我们的结果表明，我们的弱监督骨架建模匹配或超越完全监督基线，同时扩展到不同的对象类别以实现高质量的文本驱动网格动画。此外，我们的方法支持灵活的运动编辑，并与标准动画制作流程保持一致。