防御arXiv 2609.05903
EvoSafeHarness:为 Agent 自动演化模型与领域专属安全护栏
为冻结模型与目标域自动搜索可部署的 Agent 安全 harness
- arXiv
- 2609.05903
- 发表
- 层
- 应用层
- 场景
- AI Agent
- 被测模型
- Sonnet 4.6、GLM-5、Kimi-K2.5 等 11 个
为冻结模型与目标域自动搜索可部署的 Agent 安全 harness
提出 SafeEvolve,用轨迹证据协同演化安全 harness 与策略
SafeEvolve 把已完成的 on-policy 轨迹变成安全 harness 的有界更新,并用两阶段 SFT-RL 把这些更新内化进工具使用策略。
训练自博弈红队智能体 GPT-Red,规模化生成提示注入与越狱攻击
提出 SWhisper,用近超声波向语音驱动 LLM 隐蔽注入越狱提示