研究解读 影像与三维 · arXiv 2611.26603
作者 Peiyun Hu 等
Depth Pro 2: Sharp and Temporally Consistent Metric Monocular Depth
Daily Papers 收录于

给一段视频逐帧画深度图,桌沿也许很清楚,下一帧的距离却可能突然跳变。利用多帧信息通常有助于稳定画面,但物体轮廓又容易变钝。Depth Pro 2 把轮廓、尺度和时间连续性作为同时要满足的指标。

作者报告在几项指标上超过了对照方法,并发布不同体量的模型。读比较表时,速度和输出分辨率也值得一起看:处理一张静态照片关心边缘能否保留,连续拍摄则还要看同一物体的距离是否前后稳定。

论文第一幅图把相邻两帧和三种算法估计的深度并列。细看毛发边缘,一种对照方法留下了毛发纹理,相邻帧却估出不一致的深度;另一种画面更稳,边缘被平滑掉。这样的局部对照能说明平均误差之外,哪些问题会在镜头连续播放时被人看到。

原始资料