该研究提出ShiftSplit-AD方法,旨在解决基于冻结基础模型特征的视觉异常检测中,领域偏移与真实缺陷难以区分的问题。方法通过对DINOv2特征的最近邻残差矩阵进行低秩与行稀疏分解,利用稀疏成分进行异常评分。实验揭示了核心权衡:真实缺陷可能包含相关低维结构,过滤残差活动可能同时丢失缺陷信息。在AeBAD-S数据集上,稀疏评分将图像AUROC从0.6780提升至0.7294,AUPRC从0.8052提升至0.8465,改善具有统计显著性。然而,该方法在四个MVTec类别上使干净AUROC从0.9890降至0.9133,并削弱了Bottle类别的定位性能。研究表明,残差分解在领域偏移严重污染异常证据时有效,但如何在抑制偏移的同时保留缺陷结构仍是核心挑战。
| ShiftSplit-AD | 一种新的视觉异常检测方法,通过分解残差矩阵来分离域偏移与缺陷。 |
| DINOv2 | 一种基于自监督学习的基础视觉模型,用于提取图像特征。 |
| 残差矩阵 | 测试补丁与正常特征记忆库之间距离的矩阵,用于异常评分。 |
| 低秩和行稀疏分解 | 将矩阵分解为低秩分量(捕获相关结构)和行稀疏分量(捕获异常)的技术。 |
| AUROC和AUPRC | 评估异常检测性能的指标,分别表示ROC曲线下面积和精确率-召回率曲线下面积。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅