水下机器人的可靠感知面临挑战:光学相机在弱光与后向散射条件下失效,而传统前视声呐虽能应对恶劣环境,却只能提供距离和方位信息,无法分辨仰角,导致单个声呐回波难以在三维空间精确定位,限制了其在三维场景理解与精确目标检测中的应用。为此,研究者提出了uScenes多模态水下数据集,包含同步的三维多波束声呐点云与RGB图像。该数据集涵盖110个场景、95,834次同步观测,总时长277.6分钟,数据采集自多次实地作业。uScenes为水下传感器融合、跨模态表征学习及三维场景理解提供了基础支撑,相关代码与数据已公开,有望推动水下机器人感知技术的进一步发展。
| uScenes | 一个多模态水下数据集,包含同步的3D多波束声纳点云和RGB图像,用于水下机器人感知研究。 |
| multibeam sonar point clouds | 多波束声纳生成的三维点云数据,用于水下环境的三维重建和目标检测。 |
| cross modal representation learning | 跨模态表示学习,指从不同模态(如声纳和图像)中学习共享或互补的特征表示。 |
| forward looking (2D) acoustic sensors | 前视二维声学传感器,测量距离和方位角,但无法分辨仰角,导致三维定位模糊。 |
| sensor fusion | 传感器融合,将来自不同传感器的数据整合以提高感知精度和鲁棒性。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅