论文
场景重定向:通过类比迁移学习对象放置
Scene Retargeting: Learning Object Placement with Analogical Transfer
摘要
嵌入式人工智能或空间计算应用程序的交互式模拟建立在支持日常活动的真实 3D 场景之上。然而,稀疏、不规则的布局结构施加了特定于场景的物理约束,使得很难定义用于生成类似功能上下文的通用框架。我们将场景重定向形式化为跨布局稳定地转移语义连贯的空间组织,而不是依赖于文本描述或成对关系。我们的集群传输灵活地处理不匹配的对象实例并适应独特的平面图。我们通过尊重基础特征的空间分布来优化以保留各个簇的丰富语义上下文。然后,我们可以施加物理约束来细化墙壁接触、成对对齐或清理通道和开口。我们的框架在 3D-FRONT 数据集上的布局生成方面优于最先进的方法,并演示了下游应用程序,包括真实到模拟传输、类比轨迹传输和多参考组合。