SHAP和LIME解释RTL语言全乱套!错误率高达99.8%,新渲染层让乌尔都语等可视化归位
When Explanations Cannot Be Read: Measuring and Correcting SHAP and LIME Rendering for Right-to-Left Languages
arXiv LG (cs.LG) 重要 #可解释性#可视化#RTL语言 🕐 今天 12:00

📖 AI 总结

该研究指出,SHAP 和 LIME 等事后解释方法虽广泛用于文本分类器,但其可视化主要面向从左到右的语言。当应用于乌尔都语、阿拉伯语、波斯语和希伯来语等从右到左(RTL)语言时,归因数值在数学上仍然有效,但视觉呈现失效:词元顺序错乱、连写字母断裂、图表布局不符合自然阅读方向。作者将这一问题界定为可视化问题而非解释方法本身的缺陷,提出 SHAP-RTL 渲染层,在保留原始归因值、特征顺序和模型输出的前提下,修正阅读方向与字形整形,并按语言选择字体。研究在四种语言的仇恨与冒犯性言论数据集上,使用 TF-IDF 与逻辑回归分类器评估,通过每语言 200 个特征词的 OCR 往返测试衡量渲染正确性。结果显示,默认渲染的字符错误率高达 0.820 至 0.979,常见的重排与整形变通方案在乌尔都语上错误率达 0.998,反而更差,而 SHAP-RTL 在 Matplotlib 不同版本下均保持正确。该框架还能将相同归因以读者语言的简短上下文解释形式表达。研究强调语言感知可视化对提升事后可解释性跨书写系统可及性的重要意义。

🔑 关键词速览

SHAP一种基于博弈论Shapley值的模型事后解释方法,用于量化每个特征对预测的贡献。
LIME一种局部可解释模型无关解释方法,通过在实例附近扰动样本并拟合简单模型来解释预测。
RTL(从右到左)指从右向左书写的语言系统,如阿拉伯语、希伯来语、波斯语和乌尔都语。
OCR 往返测试通过光学字符识别将渲染图像转回文本,以评估可视化中文字渲染正确性的方法。
字符错误率(CER)衡量识别文本与原始文本之间字符级差异的指标,值越高表示渲染或识别错误越严重。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅