🔥 今日值得一读 几何条件化新范式让三维重建跨相机深度一致性误差最低!
GeoForward: Geometry-Guided Cross-View Alignment for Feedforward 3D Gaussian Splatting
arXiv CV (cs.CV) 🔥 重点 #3D重建#高斯泼溅#几何约束 🕐 今天 12:00
👨‍💼 主理人解读 · 为什么值得关注
用相机几何先验替代隐式特征匹配做前馈3D重建,可提升稀疏视角下高斯泼溅的精度与稳定性。

📖 AI 总结

该论文提出GeoForward,一种几何引导的前馈三维高斯泼溅重建方法。现有前馈重建多遵循外观驱动范式,依赖学习特征隐式推断跨视角对应关系,而忽略了标定相机与稀疏度量测量已提供的显式几何约束。作者据此提出几何条件化前馈重建范式,先由度量几何建立跨视角对应,再由视觉特征进行细化。具体而言,方法将稀疏LiDAR点反投影至三维并解析投影到各标定相机,形成度量对应锚点,再通过有界连续局部搜索结合视觉特征精化,并与VGGT的全局多视角上下文融合,共享表示分别驱动度量深度与高斯属性预测。在nuScenes数据集上,该方法取得最低的跨相机深度一致性误差和Chamfer距离,同时保持有竞争力的重建质量,表明以度量几何显式约束对应关系形成,是替代纯外观驱动前馈重建的有效途径。

🔑 关键词速览

Geometry-Conditioned Feedforward Reconstruction一种新范式,在形成三维表示前利用度量几何建立跨视角对应关系,视觉特征仅用于细化对应。
3D Gaussian Splatting一种三维表示方法,使用各向异性高斯函数显式建模场景,支持高效可微渲染。
VGGT一种视觉几何基础模型,用于提取全局多视角上下文特征。
Chamfer distance衡量两个点集之间相似性的度量,常用于三维重建评估。
nuScenes一个大规模自动驾驶数据集,包含多相机、LiDAR等传感器数据,用于三维重建与感知任务评测。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅