AnimaSpark：用于任意 3D 对象动画的前馈方法

虽然生成式 AI 的最新进展极大地加速了静态 3D 模型创建工作流程，但与类别无关的 3D 动画的合成仍然是 3D 资产制作中的一个重大瓶颈。目前与类别无关的动画生成方法在推理速度、运动质量和遵守文本提示方面表现出严重的局限性，从而使该过程依赖于劳动密集型的手工艺术。为了应对这些挑战，本文介绍了 AnimaSpark，这是一种用于生成与类别无关的 3D 动画的新颖管道。我们的方法源于这样一个关键见解：对于 3D 世界中的许多基本运动，通常可以在二维子空间内有效地建模相应的联合变换。该管道首先将装配好的静态 3D 模型渲染为其网格和骨架的多层图像表示，随后将其输入视频生成模型。然后，我们对生成的视频采用关键点跟踪算法来捕获投影到相机观察平面上的骨骼关节的运动。在最后阶段，我们从这些跟踪的关键点中提取平面平移和旋转，并将它们从 2D 域提升到 3D 空间以制作角色动画。综合评估表明，我们的方法在关键指标上实现了优于现有最先进技术的性能，包括文本运动对齐、运动质量和计算效率。