可解释性arXiv 2609.08173
基于 SAE 引导的关键路径识别(KPI)解决知识冲突
提出 KPI,用入度定位跨层关键路径并做 SAE 转向以解决知识冲突
- arXiv
- 2609.08173
- 发表
- 层
- 模型层
- 场景
- LLM 应用
- 测试
- Gemma-2-9B、Llama-3-8B、Llama-3.1-8B 等 4 个
摘要KPI 以入度关键路径替代大批 SAE 特征转向,在冲突 RAG 上提高忠实并减轻副作用。
KPI 针对知识冲突 RAG 中的 SAE 转向:相关性批量改特征会带入冗余,少量因果上关键的特征即可完成转向。