论文检验线性表示假设:视觉 SAE 的可解释性有多高
Verifying the Linear Representation Hypothesis: How Interpretable Are Vision SAEs?
AI 导读
论文将原本在自然语言处理中与人类判断一致的 Autointerpretability Score(AIS)迁移到视觉任务,并通过专门的用户研究验证该方法,用以评估视觉 Sparse Autoencoders(SAEs)概念的可解释性。作者同时使用标准指标和改造后的 AIS 进行评测,发现现有 SAE 可解释性指标之间既不相互相关,也不与 AIS 相关,说明没有任何单一的无参考指标足以验证视觉 SAE 的可解释性。作者认为这些发现支持近期关于解释方法应采用更可验证、以真实标注为锚的设计与评估的呼吁。论文为 28 页、含 8 张图和 5 张表,处于审稿中的预印本状态。