该研究针对当前三维基础模型(3DFMs)在单次前馈推断中重建真实场景结构的能力展开评估,提出了名为ArchWorld的基准数据集,涵盖地理覆盖广泛、元数据丰富的三维建筑地标。基于该基准,作者对现有3DFMs进行了系统的误差分析,重点考察模型误差在地理区域间的分布差异。研究发现,模型性能确实随地理区域变化,但这种差异并不完全符合训练数据代表性所预期的公平性规律;除数据代表性和场景规模外,区域特有的建筑特征与背景干扰物也导致不同地区场景的固有难度不同。基于上述失败原因,作者提出一种干预方案,在提升3DFM性能的同时缩小地理差异。该工作为理解和改进三维基础模型的地理泛化能力提供了基准与实证依据。
| 3D Foundation Models (3DFMs) | 3D基础模型,指在大规模3D数据上预训练、能泛化到多种3D视觉任务的深度学习模型。 |
| ArchWorld | 本文提出的3D建筑地标基准数据集,具有高地理覆盖率和丰富元数据。 |
| Feed-forward Pass | 前馈过程,指神经网络输入数据一次性通过网络得到输出,无需迭代优化。 |
| Geographic Disparities | 地理差异,指模型在不同地理区域的数据上性能表现不一致的现象。 |
| Intervention Scheme | 干预方案,指为改进模型性能或减少偏差而设计的具体调整方法。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅