arXiv发布SHAP-RTL框架:解决SHAP与LIME在RTL语言中的可视化问题
摘要:arXiv近日发布了一项关于SHAP和LIME后验解释方法的研究成果,提出了SHAP-RTL框架以解决这些方法在处理从右到左(RTL)语言(如阿拉伯语、波斯语、希伯来语和乌尔都语)时的可视化问题。SHAP-RTL通过纠正阅读方向和脚本形状,同时保留原始属性值和特征排序,显著提升了可视化效果。该研究通过OCR循环验证了SHAP-RTL在多语言数据集上的渲染正确性,并展示了其在仇恨言论检测等领域的应用潜力。
研究背景与问题
后验解释方法(如SHAP和LIME)在解释文本分类器方面被广泛应用,但其可视化设计主要针对从左到右的语言。当应用于从右到左(RTL)的语言时,这些方法的可视化效果会出现问题,例如标记顺序混乱、连字断开以及图表布局不符合自然阅读方向等。
SHAP-RTL框架
为了解决上述问题,研究人员提出了SHAP-RTL框架。该框架通过以下方式改进可视化效果:
- 纠正阅读方向和脚本形状:确保RTL语言的自然阅读顺序。
- 语言感知字体选择:根据不同语言选择合适的字体。
- 保留原始属性值和特征排序:确保解释的准确性不受影响。
实验与评估
研究在乌尔都语、阿拉伯语、希伯来语和波斯语的仇恨和攻击性语言数据集上进行了评估,使用TF-IDF和逻辑回归分类器,并通过OCR循环验证渲染的正确性。结果表明,默认渲染的错误率在0.820到0.979之间,而SHAP-RTL的错误率接近于零,显著优于其他方法。
核心创新点
- 语言感知可视化:首次系统性地解决了RTL语言在SHAP和LIME中的可视化问题。
- 保留解释准确性:在改进可视化的同时,确保原始属性值和特征排序的完整性。
- 多语言支持:框架支持多种RTL语言,具有广泛的应用潜力。
行业影响与未来展望
SHAP-RTL框架的发布为多语言环境下的模型解释性提供了新的解决方案,尤其在跨文化应用场景中具有重要意义。未来研究可以进一步扩展该框架的功能,例如支持更多语言类型和更复杂的可视化需求。
开发者建议
- 集成SHAP-RTL:建议开发者将SHAP-RTL集成到现有的SHAP和LIME工具中,以提升多语言支持能力。
- 关注多语言数据:在处理RTL语言数据时,优先考虑使用SHAP-RTL进行解释。
- 探索更多应用场景:除了文本分类,SHAP-RTL还可以应用于其他需要多语言支持的后验解释场景。
—— 完 ——消息来源:ArXiv Machine Learning (cs.LG) (2026-09-25)
主题标签: #SHAP #LIME #可视化 #多语言支持 #RTL语言
编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。
社区整体评论区