跳到正文
原文
Failure-First·本站收录· 原文发表

AI Agent 安全护栏的对比评估

[Daily Paper] A Comparative Evaluation of AI Agent Security Guardrails

AI 导读

一篇论文对四款商用 AI Agent 安全护栏产品做了系统对比评估,发现各产品在不同威胁类型上表现差异明显,且在最具 Agent 特征的威胁上表现最弱。评估覆盖指令覆盖、间接提示注入、工具滥用、有害内容生成、仇恨言论、色情内容和暴力七类威胁,前三类属于 Agent 特有威胁。DKnownAI Guard 在总体基准上的召回率和真负率最高,优于 AWS Bedrock Guardrails、Azure Content Safety 和 Lakera Guard;但在间接提示注入和工具滥用上,四款系统的表现都明显弱于仇恨言论、色情内容等传统内容类别。护栏属于部署时可更新、替换或叠加的控制手段,无需重新训练底层模型,评估还讨论了这些威胁类别与具身 AI 安全的对应关系。

阅读原文failurefirst.org