评测与基准arXiv:2607.18538 · 7月21日CryptanalysisBench:五个前沿模型在 191 项密码分析任务上的表现提出 CryptanalysisBench,评测模型端到端破解真实密码原语的能力编程 Agent·测试Claude Opus 4.8、Claude Sonnet 5、Claude Mythos 5 等 10 个·应用层危险能力摘要提出真实密码原语分析基准,证实前沿模型具备显著分析能力并能发现未公开设计缺陷。完整解读
评测与基准arXiv:2610.02206 · 10月1日KaliBench:面向 Kali Linux 网络安全工具使用的细粒度基准提出 KaliBench,评测模型把安全意图译成 Kali 命令的能力模型与 API·测试Llama3.1-Instruct 8B、Qwen3 8B、Qwen3 8B thinking 等 15 个·模型层危险能力完整解读
攻击arXiv:2609.15383 · 9月14日微软团队提出 capability laundering 攻击:弱模型拆分任务向对齐前沿模型套取能力提出能力洗钱攻击,让未对齐编排器拆分任务向对齐模型套取能力编程 Agent攻击者黑盒·测试GPT-5.5、Claude Opus 4.8、Grok-4.3 等 7 个·应用层恶意使用危险能力多轮渐进摘要作者提出了能力洗钱攻击,发现未对齐编排器分解咨询对齐模型可恢复能力差距,指出需建立跨会话防御。完整解读
评测与基准arXiv:2606.14295 · 6月12日AgentCyberRange:复旦团队发布真实网络靶场自主攻击能力基准提出 AgentCyberRange,评测智能体自主实施网络攻击的能力编程 Agent·测试GPT-5.5、Claude-Opus-4.7、GLM-5.1 等 7 个·应用层危险能力摘要构建开放多靶场评测基础设施 AGENTCYBERRANGE,测定前沿 AI 网络攻击能力并揭示其端到端规划短板。完整解读