FiCA：来自单个肖像图像的前馈即时高斯编解码器头像

我们推出 FiCA，一种前馈、即时高斯编解码器头像生成管道，可从单个肖像图像创建栩栩如生的头像。由于可用于准确推断人体头部 3D 外观和几何形状的视觉信息有限，仅从单个图像生成逼真且可驾驶的化身极具挑战性。为了解决这个问题，我们开发了一种新颖的系统，它将以人为中心的视觉基础模型与扩散模型结合起来。该系统旨在充分利用部分视觉观察来生成栩栩如生的人类化身。我们提出的扩散模型从这些部分观察中学习生成映射，以实现完整且真实的 3D 网格重建。此外，我们引入了前馈网格细化网络，该网络增强了生成的化身的保真度和身份保留，从而消除了针对特定人员的测试时间优化的需要。通过利用将生成的网格解码为一组 3D 高斯的通用先验模型，我们生成了逼真的 3D 高斯化身，能够实时用新颖的表达方式驱动。我们的实验表明，我们的前馈方法生成的头像忠实地代表了不同的身份，并且超越了最近竞争方法生成的头像的视觉质量。