论文
图片思维:推理驱动图像生成的系统基准
Thinking in Pictures: A Systematic Benchmark for Reasoning-driven Image Generation
摘要
统一生成模型(UGM)和世界模拟器的最新进展在视觉感知和合成方面取得了前所未有的成果。然而,这些模型主要依赖于表面级别的事件对齐,而高级视觉推理的能力尚未得到充分开发。真正的视觉生成智能需要“从推理到生成”,即从视觉输入推断潜在规则并通过精确的、逻辑约束的视觉结果推断出明显解决方案的能力。我们推出了 RIG-BENCH,这是一种新颖的综合基准,可系统地评估四个认知需求领域的推理驱动图像生成 (RIG):基于概念、基于转换、模式与结构以及基于场景。 RIG-BENCH 拥有 2000 个精选样本,可作为 RIG 的严格压力测试。我们对最先进的 UGM 和图像/视频生成模型的广泛评估揭示了显着的推理生成差距,其中模型经常产生局部合理但全局不合逻辑的输出。 RIG-BENCH 提供了一个重要的诊断框架来指导下一代逻辑基础 UGM 和世界模拟器的开发。