AI 智能体安全控制:硬边界还是软请求?
Agentic AI Security Controls: Hard Boundary or Soft Request?
AI 导读
BeyondTrust 产品战略副总裁对比六家厂商公开文档后提出,AI 智能体安全控制分为智能体无法绕过的硬边界与依赖智能体或宿主持续配合的软请求,市面多数产品属于后者。以 Claude Code 文档为例,deny 规则不覆盖自行读写文件的 Python 等子进程,需另开沙箱在操作系统层拦截;Endor Labs 的文档也自认其钩子是指令式控制,并非防篡改运行时。作者引用多项研究说明内容检测能提高攻击成本但不构成边界,如 Anthropic 在 Claude for Chrome 测试中把注入成功率从 23.6% 降到 11.2%,CAISI 与 UK AISI 通过基准未覆盖的攻击把一款防劫持评测居前模型的成功率从 11% 提到 81%。
相关论文