研究者提出仅修改 SAE 解码器的后门攻击,可在不改动语言模型的情况下植入行为
提出只改 SAE 解码器的后门,在冻结语言模型上植入代码插入
- arXiv
- 2610.06049
- Published
- Layer
- Model layer
- Setting
- Models and APIs
- Evaluated models
- Gemma 3 4B Instruct, Qwen3 1.7B, Llama 3.1 8B Instruct
- AttacksPoisoning and backdoors
- TechniqueDormant triggers
Abstract只改解码器的 SAE 可带上代码插入后门,且若干常规质量指标变化不大。
只改 SAE 解码器、冻结编码器与语言模型,即可把代码插入行为放进推理时的辅助组件。作者把这视为 SAE 供应链问题:checkpoint 一旦替换某一层激活,就参与后续计算,而不只是解释工具。