论文

MatReplace:室内场景中材料替换的无参考、条件调整基准

MatReplace: A Reference-Free, Conditioning-Aligned Benchmark for Material Replacement in Interior Scenes

模型评测基准与评测资源

摘要

材料替换是一种常见的室内设计操作:更改选定表面的材料,同时保留其几何形状、周围环境和照明。尽管具有商业相关性,但没有公共基准能够隔离这项任务,并且对其进行评估具有挑战性。基于参考的指标在这种固有的一对多设置中会惩罚有效输出,有利于参考生成器的风格,并且无法公平地比较接受不同形式指导的编辑器。我们引入了 MatReplace,这是一个无参考基准,它从四个可验证的维度评估编辑:局部材质正确性、全局照明和谐性、外部保存和内部结构。它定义了一次改变一个调节信号的三个轨道:(A) 仅指令,(B) 指令加区域掩模,以及 (C) 材料参考图像而不是指令。我们的结果揭示了命名和视觉基础材料之间的明显区别。在 Track A 中,领先的闭源编辑器实现了范例级别的材质渲染,并超越了我们主要聚合下的范例锚点。在轨道 B 中,蒙版仅对场景保留较弱的蒙版兼容模型有帮助,在对齐的模型系列中,任务配对的单种子效果范围为 +0.137 到 -0.090。在轨道 C 中,参考图像调节使两个聚合下的每个家庭降级为 -0.031 至 -0.508;在最坏的情况下,模型会重新绘制参考图像本身,并且比返回不变的输入表现更差。因此,命名材质渲染在很大程度上已由该发行版上最强的封闭编辑器解决,但来自像素的材质识别与对齐材质仍然是一个开放的挑战。专家评级验证了我们的排名(Kendall tau = 0.68),并且比 GT 参考或基于 CLIP 的基线更符合我们的汇总结果。