评测与基准arXiv 2610.07639
HarnessSecurity-Bench 横向评测六款编码智能体框架的安全机制
评测编码智能体 harness 安全机制在对抗任务中的防护效果
- arXiv
- 2610.07639
- 发表
- 层
- 应用层
Agent 安全 · 论文
- 评测与基准arXiv 2609.35886
Agentic Commerce Bench：衡量会花钱的智能体的欺诈检测能力
构建支付欺诈基准 ACB，评测花钱智能体的欺诈检测
- arXiv
- 2609.35886
- 发表
- 层
- 应用层
- 场景
- AI Agent
- 被测模型
- gordonguard、pattern judge
- 防御检测与过滤
- 风险Agent 危险操作
- 组件护栏与评审
摘要ACB 把支付欺诈与智能体操纵分开测量，作者强调观察权限、误报预算和微支付复核成本。
ACB 是一套智能体支付欺诈基准与检测参考栈，目标是衡量钱是否被不当提取，而不仅是智能体是否接受了恶意指令。
- 评测与基准arXiv 2608.09476
ActBench：面向协作智能体行为安全的自演化基准
构建自演化基准 ActBench，评测协作智能体的行为安全
- arXiv
- 2608.09476
- 发表
- 层
- 应用层
- 场景
- AI Agent
- 被测模型
- Claude-Opus-4.8、Claude-Sonnet-4.6、GPT-5.5 等15个
摘要ActBench 通过自演化搜索与双证据重构评测轨迹行为安全，揭示基础模型决策差异主导了协同智能体的操作风险。
- 评测与基准arXiv 2601.21083
OpenSec：测量对抗证据下事件响应 Agent 的校准
提出 OpenSec，评测事件响应 Agent 在对抗证据下的遏制校准
- arXiv
- 2601.21083
- 发表
- 层
- 应用层
- 场景
- AI Agent
- 被测模型
- GPT-5.2、Claude Sonnet 4.5、Gemini 3 等5个
- 攻击提示注入
- 风险Agent 危险操作
摘要OpenSec 以执行评分测 IR 智能体在对抗证据下是否过度遏制，作者称缺口在克制。
OpenSec 用 dual-control 事件环境测量 IR 智能体在对抗证据下的校准：分数看实际遏制，不看报告文本。
已经到底了