论文
FlowAnchor:稳定编辑信号以实现无反转视频编辑
FlowAnchor: Stabilizing the Editing Signal for Inversion-Free Video Editing
摘要
我们提出了 FlowAnchor,这是一个 无需训练 框架,用于稳定、高效、无反转、基于流的视频编辑。无反转编辑方法最近通过使用编辑信号直接控制采样轨迹,在图像中显示出令人印象深刻的效率和结构保留。然而,将这种范例扩展到视频仍然具有挑战性,在多对象场景或帧数增加的情况下通常会失败。我们确定根本原因是高维视频潜在空间中编辑信号的不稳定,这是由不精确的空间定位和长度引起的幅度衰减引起的。为了克服这一挑战,FlowAnchor 明确锚定了编辑位置和编辑强度。它引入了空间感知注意细化(它强制文本指导和空间区域之间的一致对齐)和自适应幅度调制(它自适应地保留足够的编辑强度)。这些机制共同稳定了编辑信号,并引导基于流的进化向所需的目标分布发展。大量实验表明,FlowAnchor 在具有挑战性的多对象和快速运动场景中实现了更忠实、时间连贯且计算效率更高的视频编辑。该项目页面位于 https://cuc-mipg.github.io/FlowAnchor.github.io/。