论文
在生活环境中观察世界:统一的室内外城市世界一代
To See a World in a Living Context: Unified Indoor-Outdoor Urban World Generation
摘要
文本驱动的 3D 生成在创建大规模室外环境和详细的室内场景方面取得了快速进展,但这些领域通常是独立合成的,缺乏连贯的城市世界所需的对应性。我们推出了 HoloWorld,这是一个建立在不断更新的跨尺度世界背景之上的统一的室内外城市世界生成框架。从用户描述开始,HoloWorld 逐步表示和更新不同的世界信息,从城市规模规划到单个建筑物,允许生成的内部与其相关的外部建筑物保持明确的对应关系。以不断变化的环境和先前生成的相邻街区为条件,HoloWorld 自回归生成具有跨街区一致的空间组织和视觉识别的城市外观。生成的外部表示进一步基于 3D 建筑实例和占地面积,从而能够生成具有几何约束布局和继承的外观特征的特定于建筑的室内生成。据我们所知,HoloWorld 是第一个在连贯的 3D 城市世界中统一室内和室外生成的框架。大量实验表明,HoloWorld实现了卓越的城市外部生成性能,将平均AQS得分比SOTA提高了7.68%,并获得了最高的平均RDR得分,同时在统一的3D城市世界中保持了强大的建筑级室内外对应性和跨街区连续性。我们的项目页面:https://huangxb326.github.io/HoloWorld/。