该论文提出GeoForward,一种几何引导的前馈三维高斯泼溅重建方法。现有前馈重建多遵循外观驱动范式,依赖学习特征隐式推断跨视角对应关系,而忽略了标定相机与稀疏度量测量已提供的显式几何约束。作者据此提出几何条件化前馈重建范式,先由度量几何建立跨视角对应,再由视觉特征进行细化。具体而言,方法将稀疏LiDAR点反投影至三维并解析投影到各标定相机,形成度量对应锚点,再通过有界连续局部搜索结合视觉特征精化,并与VGGT的全局多视角上下文融合,共享表示分别驱动度量深度与高斯属性预测。在nuScenes数据集上,该方法取得最低的跨相机深度一致性误差和Chamfer距离,同时保持有竞争力的重建质量,表明以度量几何显式约束对应关系形成,是替代纯外观驱动前馈重建的有效途径。
| Geometry-Conditioned Feedforward Reconstruction | 一种新范式,在形成三维表示前利用度量几何建立跨视角对应关系,视觉特征仅用于细化对应。 |
| 3D Gaussian Splatting | 一种三维表示方法,使用各向异性高斯函数显式建模场景,支持高效可微渲染。 |
| VGGT | 一种视觉几何基础模型,用于提取全局多视角上下文特征。 |
| Chamfer distance | 衡量两个点集之间相似性的度量,常用于三维重建评估。 |
| nuScenes | 一个大规模自动驾驶数据集,包含多相机、LiDAR等传感器数据,用于三维重建与感知任务评测。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅