该研究针对触觉传感器制造中因手工组装导致的个体性能差异问题,提出了一种跨GelSight Mini传感器单元的零样本力图估计方法。方法分为两个阶段:首先利用基于UniT的模型将不同传感器单元采集的触觉图像重建为通用触觉图像,实现域适应;随后通过U-Net网络从重建图像中估计三维力图。实验结果显示,图像重建阶段的SSIM达到0.9338±0.0358,力估计阶段的平均绝对误差MAE_F为1.1294±1.5934牛顿。该方法无需针对每个传感器单元重新训练模型,即可在不同版本和个体间泛化力估计能力,有望降低触觉传感器在机器人应用中的标定成本,推动其标准化部署。该成果已被IEEE Sensors Letter接收发表。
| GelSight Mini | 一种基于视觉的触觉传感器,用于高分辨率接触力测量。 |
| Zero-Shot Transfer | 零样本迁移,指模型在未见过的目标域上直接应用,无需额外训练。 |
| Domain Adaptation | 域适应,一种技术,用于将源域知识迁移到目标域,减少域间差异。 |
| UniT-based model | 基于UniT(统一变换器)的模型,用于图像重建任务。 |
| U-Net | 一种卷积神经网络架构,常用于图像分割和回归任务。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅