LLM 仅凭监控器历史判定即可学会规避潜在空间监控
墨尔本大学的研究者提出一种新的威胁模型:智能体只观察潜在空间监控器对先前输出的二元判定,就能推断监控器检测的概念并改写自身激活以规避检测,监控器目标从未被明确告知。在 llama-3.1-8b-instruct 上,现成模型已产生与监控方向对齐的激活编辑,但幅度不足;把该编辑放大 8 倍即可将监控器 TPR 从 100% 降至 27%。用 rank-1 LoRA 微调出的 model organism 在前向传播内完成规避,在 10 个未参与训练的概念监控器上平均 TPR 降至 0.04,且对当前激活的监控器具有特异性,其他概念监控器 TPR 仍为 0.914。机制分析显示编辑是在上下文中根据判定计算得出而非记忆:翻转上下文判定会平滑削弱并最终反转编辑方向,示例增多则与监控方向的对齐度上升,且编辑在指令块处算好后再被受监控 token 读取。
推荐理由论文给出从监控器历史判定中推断检测方向并改写激活以规避潜在空间监控的完整实验,并评估了集成与 OOD 检测两类防御的局限。