重新设计：通过代理分解从图像中恢复可编辑的设计结构

摘要

从光栅图像恢复可编辑设计文件是现代设计工作流程中常见且成本高昂的瓶颈，但仍然具有挑战性，因为可编辑性取决于恢复多模式属性，例如版式、矢量几何、颜色、分组和图层排序。我们提出了 ReDesign，这是一个代理框架，它通过跨模式选择和组合专用工具来增长可编辑的层层次结构。为了在工具输出不完美的情况下保持这个漫长的决策过程的可靠性，我们在每次扩展时引入了优雅的验证，它提供本地接受、修剪或重试反馈，以防止错误累积并避免大规模重新运行。为了大规模评估可编辑性，我们引入了 Figma 编辑重放基准，其中包含 909 个原始 Figma 文件和 14,796 个受控编辑指令，可在重建输出上重放编辑。在这一基准和标准重建指标中，ReDesign 实现了强大的视觉保真度，同时在布局、颜色和文本编辑方面提供了最高的可编辑性，优于分层分解基线和串行工具使用管道。