论文

Hitem3D 2.0:多视图引导原生 3D 纹理生成

Hitem3D 2.0: Multi-View Guided Native 3D Texture Generation

应用与实践内容创作

摘要

尽管最近的进展提高了 3D 纹理生成的质量,但现有方法仍然面临纹理覆盖不完整、跨视图不一致以及几何结构和纹理之间未对准的问题。为了解决这些限制,我们提出了 Hitem3D 2.0,这是一种多视图引导的原生 3D 纹理生成框架,通过集成 2D 多视图生成先验和原生 3D 纹理表示来增强纹理质量。 Hitem3D 2.0包含两个关键组件:多视图合成框架和原生3D纹理生成模型。多视图生成建立在预先训练的图像编辑主干上,并结合了即插即用模块,可显着促进几何对齐、跨视图一致性和照明均匀性,从而实现高保真多视图图像的合成。以生成的视图和 3D 几何体为条件,原生 3D 纹理生成模型将多视图纹理投影到 3D 表面上,同时合理地完成看不见的区域中的纹理。通过将多视图一致性约束与原生 3D 纹理建模相集成,Hitem3D 2.0 显着提高了纹理完整性、跨视图一致性和几何对齐。实验结果表明,Hitem3D 2.0 在纹理细节、保真度、一致性、连贯性和对齐方面优于现有方法。