论文
LPH-VTON:通过潜在流程切换解决虚拟试穿的结构-纹理困境
LPH-VTON: Resolving the Structure-Texture Dilemma of Virtual Try-On via Latent Process Handover
摘要
虚拟试穿 (VTON) 旨在合成与人的身体和姿势精确对齐的逼真服装图像。然而,当前基于扩散的方法面临结构完整性和纹理保真度之间的基本权衡。在本文中,我们将这一挑战形式化为流行架构中固有的互补归纳偏差的结果:严重依赖空间约束的模型自然有利于几何对齐,但通常会抑制纹理,而由无约束生成先验主导的模型擅长充满活力的细节渲染,但容易出现结构漂移。基于这一诊断,我们提出了 LPH-VTON,这是一种新的协同框架,可以在单个连续去噪过程中解决这种紧张关系。 LPH-VTON 战略性地分解生成,利用结构偏向模型在早期阶段建立几何一致的潜在支架,然后将控制权移交给纹理偏向模型以进行高保真细节渲染。大量的实验验证了我们的方法。我们的模型实现了卓越的帕累托最优平衡,在感知 忠实性 中建立了新的基准,同时在标准数据集 VITON-HD 上保持高度竞争的结构对齐,证明了时间架构解耦的有效性。