论文

Lift、Associate 和 Fuse:2D 到 3D 基础模型迁移的以决策为中心的框架

Lift, Associate, and Fuse: A Decision-Centric Framework for 2D-to-3D Foundation Model Transfer

模型评测评测方法与指标

摘要

将预测从二维基础模型转移到三维分割的方法通常按任务或表示进行分组。这些分组模糊了决定系统是否在不同视图之间保持一致的决策:图像证据的基础在哪里,观察何时成为一种身份,如何处理语义和粒度冲突,融合哪些信息,以及为以后的查询保留什么状态。我们引入 \textbf{Lift、Associate 和 Fuse (LAF)},这是一个以决策为中心的框架,它将传输系统表示为五个运算符:\textbf{Generate、Associate、Reconcile、Fuse 和 Persist/Query}。 LAF 为持久载体定义了一个明确的契约——它的空间支持、语义状态、身份状态、不确定性、来源和支持的操作——并确定了丢弃的证据变得不可恢复的第一阶段。我们将该框架作为结构化审计协议进行操作,并将其应用于截至 2026 年 8 月 7 日可用的 161 个系统,涵盖基于点、场、高斯、对象、图形和内存的载体。在最终确认通过后,表示、时间、关系和前馈压力测试不需要额外的分析阶段。由此产生的决策轨迹暴露了四个重复出现的属性:关联不建立身份;载体设计修复了查询接口和修正边界;渲染视图、原生 3D 和提案级评估不可互换; \emph{无需训练}、\emph{real-time}、\emph{open-vocabulary} 和 \emph{generalized} 等限定符仅在附加到阶段和完整成本分类账时才有意义。因此,LAF 提供了一种表示中立的方法,用于比较现有系统、诊断不可逆故障以及为未来代理指定可修改的 3D 感知。