DecoRec：通过对象级扩散从单视图图像重建分解的 3D 场景

在本文中，我们介绍了 \textit{DecoRec}，这是一种新颖的系统，旨在将单视图 2D 图像提升为分解的 3D 场景网格。当前的单视图场景重建方法通常依赖于对象检索或粗糙 3D 体素或表面的回归，导致捕获输入图像的外观和几何形状不准确。缺乏高质量的大规模场景级数据集使得从单视图图像直接生成 3D 场景变得更加复杂。为了从单视图图像生成高质量的 3D 场景，DecoRec 利用最新的基于扩散的单视图对象重建方法来分别重建各个对象。随后，提出了一种细化管道来有效地合并这些重建对象，通过可微分渲染技术和扩散引导细化来增强外观和几何形状。我们的结果表明，DecoRec 促进了几何和新颖合成方面的高质量单视图场景重建，为房间室内设计等下游应用提供了显着的优势。