可解释性arXiv 2610.06945
超越线性表征假设:KANSteer 用非线性激活引导文本到图像模型
提出 KANSteer,用非线性激活引导拟合文生图有序概念轨迹
- arXiv
- 2610.06945
- 发表
- 层
- 模型层
- 场景
- 模型与 API
- 被测模型
- FLUX.1-schnell、FLUX.1-dev
- 组件图像生成
摘要KANSteer 用曲线替代固定方向。
KANSteer 研究文生图扩散模型里,有序视觉概念能否沿单一激活方向被遍历,并改用一维曲线做 steering。
提出 KANSteer,用非线性激活引导拟合文生图有序概念轨迹
KANSteer 研究文生图扩散模型里,有序视觉概念能否沿单一激活方向被遍历,并改用一维曲线做 steering。
提出 D-Scope,用视觉质心检索 SAE 解码方向并转向扩散生成
D-Scope把扩散 Transformer 中 SAE 特征的高激活图像块,接到文本查询驱动的单方向生成干预上。
提出有守卫最小步激活引导,只在关机语境把继续偏好转向接受关机
用逐步 SAE 诊断文生图概念脆性,并推理时向类原型插值
作者用逐步稀疏自编码器审计文生图扩散模型里随物体变化的概念脆性,并用推理时原型插值检验该诊断。。
在写入点定位拒答方向,经刚性旋转跨架构迁移并门控放大
作者研究拒答表示是否随架构改变,结论是表示共享、读取位置随架构变。