论文
ExpressEdit:在 Photoshop 中使用扩散模型快速编辑风格化面部表情
ExpressEdit: Fast Editing of Stylized Facial Expressions with Diffusion Models in Photoshop
摘要
人物的面部表情是视觉叙事的重要组成部分。虽然当前的人工智能图像编辑模型有望帮助艺术家完成风格化表达编辑的任务,但这些模型将全局噪声和像素漂移引入到编辑的图像中,从而阻碍了将这些模型集成到专业图像编辑软件和工作流程中。为了弥补这一差距,我们引入了 ExpressEdit,这是一个完全开源的 Photoshop 插件,它不受专有图像编辑模型的常见缺陷的影响,并且与液化等本机 Photoshop 操作具有强大的协同作用。 ExpressEdit 可在单个消费级 GPU 上 3 秒内无缝编辑表达式,比流行的专有模型快得多。此外,为了支持根据不同的叙事需求生成多样化的表达,我们编制了一个包含 135 个表达标签的综合表达数据库,其中包含为检索增强生成而设计的示例故事和图像。我们开源代码和数据集,以促进未来的研究和艺术探索。