论文
DReSG:程式化高斯泼溅的扩散残差
DReSG: Diffusion Residuals for Stylized Gaussian Splatting
摘要
以 3D 高斯分布 (3DGS) 为代表的场景的参考引导风格化对于高效且可控的 3D 内容创建非常重要。现有的基于 VGG 特征的 3D 风格化方法提供了稳定的渲染视图优化,但通常无法充分体现富有表现力的参考风格线索;扩散模型提供了更强的图像先验,但直接的按视图或基于分数的扩散指导可能会导致视图漂移、局部伪影和难以控制的外观更新。我们提出了 DReSG,一种基于 3D 的残差反馈框架,用于风格化高斯分布。 DReSG 将注意力引导的扩散建议表示为相对于当前渲染的残差目标,并通过多视图高斯反馈逐步将这些残差吸收到共享高斯场景中。为了使这种反馈稳定且可控,DReSG 在目标构建期间调节残余强度,并在多视图拟合期间将覆盖感知视图选择与冲突过滤颜色更新相结合。大量实验表明,DReSG 实现了有竞争力的参考引导风格化,同时更好地保留了场景结构和跨视图稳定性。我们的项目页面位于 https://vpx-ecnu.github.io/DReSG-website/。