防御arXiv 2610.04504
论文提出 VAL 框架:相同 ASR 的 LLM Agent 防御可能对应不同安全保证
提出 VAL 框架并用确认门与参数沙箱约束高风险工具调用
- arXiv
- 2610.04504
- 发表
- 层
- 应用层
- 场景
- AI Agent
- 测试
- Meta Llama 3.1 8B、DeepSeek-chat、Kimi
提出 VAL 框架并用确认门与参数沙箱约束高风险工具调用
提出 STAR-Guard 双层防御缓解长程智能体遗忘安全约束
摘要揭示 GHOST 跨轮约束遗忘风险,构建 SCARBench 基准并通过 STAR-Guard 双层防御消除违规。
提出 SkillGuard,用可达性切断污染后通往禁止状态的技能调用
用 MasDrift 评测多智能体架构的授权保持
MasDrift 把多智能体设计中的授权保持做成可测量性质,对象是没有攻击者的普通委托。
提出 EvoSafeHarness,为冻结模型与目标域自动搜索安全 harness
提出 VAC,用真实操作参数与来源隔离保护智能体浏览器确认
提出 ActGov,在工具执行前用确定性策略拦截间接提示注入
提出 Skilder,用角色技能包和 MCP 路由硬拦截越权工具调用
Skilder 把企业工具型智能体的能力按角色打包,经一个 MCP 服务器做渐进发现,使工具范围由服务器而不是提示词来执行。
提出 MetaPermit,用元属性与固定策略挡住工具返回中的间接提示注入
MetaPermit 是面向工具使用 LLM 智能体的混合访问控制:LLM 描述候选调用,固定策略决定是否放行。
提出工具智能体的状态攻击 DART 与预执行防御 SAGE
摘要论文提出状态控制框架 SEAD、攻击 DART 与防御 SAGE,实验显示执行反馈与环境探测在攻防交互中具有关键作用。
提出 RSI-Master 以约束自主后训练动作并抑制奖励作弊
提出 ToolFence 能力级授权,执行前编译蓝图并确定性拦截工具调用