论文
FoundDP：重新审视双像素深度估计中的弱视差可观测性
FoundDP: Revisiting Weak Disparity Observability in Dual-Pixel Depth Estimation
摘要
双像素 (DP) 成像可使用子孔径视差从单个相机进行公制深度估计。然而，极小的有效基线限制了视差可观测性，导致无纹理、低对比度或下采样区域的结构退化和深度失效。现有的基于 DP 的方法主要依赖于局部视差线索，因此当视差信号较弱或模糊时变得不可靠。为了解决这个限制，我们提出了 \emph{FoundDP}，一个统一的框架，它将度量 DP 深度与单目深度基础模型的全局结构先验集成在一起。我们的方法通过 DP 导出的深度保留度量尺度，并利用 Vision Transformer (ViT) 特征来恢复弱视差区域的结构一致性。为了确保 DP 成像条件下可靠的度量引导，我们通过 ViT 特征对齐来识别并减轻由 DP 散焦模糊引起的 ViT 表示退化，从而实现稳定的度量引导深度估计。对合成和真实 DP 基准的大量实验表明，FoundDP 具有卓越的性能，在结构保真度和度量精度方面具有持续的增益，特别是在视差可观测性降低的情况下。代码位于：https://github.com/EchoLighting/FoundDP