论文

WINGS:使用 3D 原生生成先验进行无参考高斯泼溅修复

WINGS: Reference-Free Gaussian Splatting Inpainting with 3D-Native Generative Priors

应用与实践内容创作

摘要

修复 3D 高斯泼溅场景是 3D 编辑中的一个关键挑战,需要在 3D 空间的遮罩区域内生成可信的内容。先前的方法依赖于 2D 扩散模型来生成一个或多个修复的参考视图,这使得它们容易受到与多视图不一致和漫长的优化时间相关的挑战。与这些方法不同,我们引入了一种在 3D 中本地运行的无参考高斯喷溅修复方法。我们的方法利用大型预训练 3D 先验的嵌入空间,结合结构完成网络来提供生成先验,从而重建缺失区域的几何形状和外观。它完全以 3D 方式执行内容生成,无需协调多个修复参考图像的不一致,并且比相关的基于 2D 的方法更快。我们通过大量的实验和用户研究,定性和定量地证明了我们方法的有效性。据我们所知,这项工作是第一个在 3D 原生生成先验的学习表示空间中运行的高斯泼溅修复方法,而不依赖于修复参考视图。