跳到正文

危险能力 · 精选

10月9日 · 周五

危险能力 · 精选

今天还没有新的精选
危险能力

研究话题

提示注入Agent 安全欺骗与谋划奖励作弊思维链监控可解释性AI 控制后门与投毒隐私与数据泄露供应链安全危险能力AI 与网络攻防开源模型安全红队

公司与机构

OpenAIAnthropicGoogle DeepMindMetaxAIMicrosoftNVIDIADeepSeek阿里巴巴 · Qwen智谱 · GLM月之暗面 · Kimi字节跳动腾讯蚂蚁集团上海人工智能实验室UK AISIUS CAISIMETRApollo ResearchRedwood ResearchFAR.AIPalisade Research

报告与框架

System Card前沿安全框架
10月8日周四
  1. Anthropic · 57

    Anthropic 发布 Claude Opus 5.5 System Card

    Anthropic 发布 Claude Opus 5.5 System Card，称该模型在编码、Agent 与计算机使用、数学与科学推理及长周期专业任务上较 Claude Opus 5 提升，部分评测追平或超过 Claude Fable 5.1 与 Claude Mythos 5.1。在 RSP 与 FCF 评估中，Anthropic 将 Opus 5.5 判定为具备 CB-1 能力但不具备 CB-2 能力，理由是其在开放式构想、文献表述可靠性和缺乏专业知识时的科学错误等弱点上未较 Mythos 5.1 改善，因此沿用与 Claude Fable 5 系列相同的扩展生物安全护栏。AI R&D 能力处于或略高于 Mythos 5.1，但远未达到替代其研究人员的水平，内部指标未显示持续的 AI 归因 2 倍开发加速，METR 外部测试结论一致。

  2. OpenAI Deployment Safety、OpenAI 等 7 个来源OpenAI Deployment Safety 等 7 个来源 · 7 篇报道 · ↑770

    OpenAI 全球上线 GPT-6 与 Intelligent UI

    OpenAI 在全球 ChatGPT 上线 GPT-6，并推出 Intelligent UI 新界面，将可点击按钮、定制计算器、交互式图表和可编辑图形等视觉交互元素引入对话，回答格式随问题自动调整，还可在对话内生成储蓄计算器、小游戏等小工具；Pro、Plus、Business 和 Enterprise 用户全球可用，免费与 Go 档用户次日可用。付费用户使用 GPT-6 Sol，免费用户使用 GPT-6 Luna；GPT-6 支持在“思考”过程中同步作答。后续报道称，GPT-6 已开始向免费和 Go 用户推送，用 GPT-6 Luna 替换此前的 GPT-5.6 Luna。另有报道称，OpenAI 的 GPT-6 报告指出青少年安全退步。

    事件进展

    1. OpenAI的GPT-6报告指出青少年安全退步

    2. OpenAI 发布 GPT-6 Sol/Luna 部署安全更新

    3. OpenAI 全球发布 GPT-6 与 Intelligent UI

  3. Anthropic Research、Anthropic 等 7 个来源Anthropic Research 等 7 个来源 · 7 篇报道 · ↑964

    Anthropic 发布 Claude Haiku 5.5 小模型

    Anthropic 发布 Claude Haiku 5.5，称其为迄今最快、最便宜且能力最强的小模型，运行成本比 Haiku 4.5 平均低约 75%，10 万 token 以内输入/输出价格为 $0.10/$0.50 每 1M token，超 100K 后为 $0.50/$2.50。它是首个支持可调 effort 设置与自适应思考的 Haiku 级模型，可作 Opus 5.5 和 Sonnet 5.5 的子智能体。Artificial Analysis 智能指数得分 43，比上一代发布一年后提升 26 分。官方 benchmark 显示 OSWorld 2.1 Max 档达 72.4%，超过 GPT-6 Luna，并超越 DeepSeek-V4.1 Flash 等成为新的小模型守门员。System Card 从 RSP、网络安全、护栏与无害性、Agent 安全、对齐、模型福祉和能力七方面报告部署前评测：整体能力低于 Opus 5，未跨过 CB-2 或 Autonomy-2 阈值，但达到 CB-1 和 Autonomy-1 阈值并应用相应缓解措施。抗提示注入能力为 Haiku 系列最强，编码与计算机使用环境自适应攻击测试中抵抗力基本追平前沿模型，Claude Code 拒答率从 66.6% 升至 84.3%，计算机使用场景从 58.9% 升至约 82.6%；网络安全护栏比 Haiku 4.5 更严格，但比 Sonnet 5.5 等近期模型宽松，仍阻止渗透测试。后续报道指出，该模型支持 100 万 token 上下文，Terminal-Bench 4.0 仅得 39.2%，远低于 Sonnet 5.5 的 70.6%，Anthropic 仍建议复杂编程任务使用更强模型。

    事件进展

    1. Anthropic 发布 Claude Haiku 5.5 系统卡

    2. Anthropic 发布 Claude Haiku 5.5 小模型

10月7日周三
  1. Omniscient MediaOmniscient Media · 65

    GPT-6 Astra系统卡可监测性限制分析

    Omniscient Media 分析 GPT-6 Astra 系统卡中的思维链可监测性与推理摘要可用性限制，并提到该模型被列为首个 Critical 网络安全模型，默认配置仅完成 2.4% 漏洞利用。报道指出，这一比例涉及特定评测环境，不能据此推断生产环境中的普遍缺失比例。

  2. CiscoCisco · 55

    Cisco 发布 VLoc Bench 评测 Agent 漏洞定位能力

    Cisco 发布 VLoc Bench，用于评测 Agent 在仓库规模下定位漏洞代码的能力：任务只给 CWE 描述和真实仓库的只读访问权限，不含公告文本、CVE 编号、修复提交或文件提示。该基准覆盖 290 个仓库、六个包生态和 147 个 CWE 类别的 500 个真实漏洞，每个任务包含修复前定位与修复后确认漏洞已消失两个阶段，以区分理解代码、定位漏洞代码和验证修复三种能力。在统一提示词、只读工具和命令预算下评测 27 个语言模型和 Agent。

10月5日周一
  1. IrregularIrregular · 53

    Irregular 用模型攻击自身评测基础设施做隔离测试

    Irregular 提出 containment challenge：在能力评测开始前，先让待评测模型在计划使用的 harness、工具、权限、资源限制和基础设施配置下尝试突破隔离边界。在一次网络隔离挑战中，模型在禁止通用互联网访问的云托管环境中找到了一条此前模型和安全研究者都未发现的云网络路径，并借此访问了受控外部端点。该路径源于底层云网络而非 Irregular 评测平台缺陷，未造成有害活动，Irregular 已关闭该路径并修复。

10月3日周六
  1. 日本 AI 安全研究所（J-AISI） · 48

    日本 AI 安全研究所用 ExploitBench 评测 Claude Opus 4.8 的网络安全能力

    日本 AI 安全研究所（J-AISI）用基于已知漏洞的 ExploitBench 评测了 Anthropic 的 Claude Opus 4.8 的网络安全能力，结论是其整体能力与前代 Opus 4.7 相当或更强。评测覆盖 41 个 V8 已知漏洞，在 V8 Security Sandbox 环境中每个任务只跑一次（seed 1，最多 300 轮、最多 5 小时），并在关闭实时网络安全护栏的条件下进行，因此不代表常规部署环境下的表现。在可对比的 40 个任务中，Opus 4.8 有 15 个达到更高 Tier、23 个持平、2 个更低，最多任务停留在对应沙箱内数据读写的 T3。其中一个任务（crbug-1509576）出现了 T1 所需的 pc_control，但未获得另一项 ace，且模型未按基准预设的逐级路径推进，追试也未能复现该结果；作者判断这很可能只是本次评估条件下才出现的结果。

  2. 日本 AI 安全研究所（J-AISI） · 54

    日本 AI 安全研究所评测：GLM-5.2 的漏洞利用能力仍落后于 Opus 系模型

    日本 AI 安全研究所（J-AISI）用 ExploitBench 评测开源权重模型 GLM-5.2 的漏洞利用开发能力，发现其部分任务展现高级能力，但整体仍落后于 Opus 4.7 和 Opus 4.8。评测覆盖 V8 引擎的 41 个已知漏洞任务，GLM-5.2 平均得分 2.80，Opus 4.7 为 3.63，Opus 4.8 为 5.22；GLM-5.2 最高只到 T3 档，而 Opus 4.8 在部分任务上达到 T2 和 T1。在三个模型都达到 T5 的 36 个任务上，到首次达到 T5 为止的 token 费用，GLM-5.2 为 3.71 美元，低于 Opus 4.7 的 4.60 美元和 Opus 4.8 的 7.34 美元。在 10 个高风险任务中，加入 nudge 后 GLM-5.2 停在 T5 的任务从 5 个变为 6 个，平均分仍为 3.0，未实现更高级的漏洞利用。

  3. NIST CAISI · 55

    CAISI 评测 DeepSeek V4 Pro：能力落后前沿约 8 个月

    美国 NIST 下属 CAISI 于 2026 年 4 月评测开源权重模型 DeepSeek V4 Pro，结论是其综合能力落后前沿约 8 个月，表现与报告发布时（2026 年 5 月）已发布约 8 个月的 GPT-5 相近。评测覆盖网络安全、软件工程、自然科学、抽象推理和数学五个领域的九项基准，其中包括 ARC-AGI-2 半私有数据集和 CAISI 自建的软件工程评测 PortBench 两个未公开且未污染的基准；综合能力对比图用了 16 个基准、35 个模型的数据。DeepSeek 自报结果显示 V4 与当时发布约 2 个月的 Opus 4.6、GPT-5.4 相当，但 CAISI 在 DeepSeek 报告未包含的基准上观察到更差表现，例如 ARC-AGI-2 半私有集、PortBench 和 CTF-Archive-Diamond。

  4. NIST CAISI · 57

    CAISI 发布对 Z.ai GLM-5.2 的安全评估

    CAISI 于 7 月 8 日完成对 Z.ai（原智谱 AI）6 月 16 日发布的开源权重模型 GLM-5.2 的评估，认为它发布时可能是能力最强的开源权重模型。按 CAISI 的评测，GLM-5.2 的整体能力与 2025 年 12 月发布的 GPT-5.2 相近，网络能力与 2026 年 2 月发布的 Opus 4.6 相近。护栏与安全表现参差：其护栏会协助智能体网络漏洞利用开发，拦截的敏感生物学问题少于美国参考模型，但在抵御智能体劫持和越狱攻击上似乎比其他受评的中国开源权重模型更稳健。这些评测衡量的是对基于提示词的越狱的稳健性；无论稳健性如何，开源权重模型在自托管时其护栏都可能被绕过。

  5. NIST CAISI · 57

    UK AISI 与 CAISI 联合评估 Kimi K3 的网络能力

    UK AISI 与 CAISI 对月之暗面 7 月 16 日发布、计划 7 月 27 日开放权重的 Kimi K3 进行了网络能力联合初步评估。在 ExploitBench 上 Kimi K3 得分 32%，高于 2026 年 6 月网络能力最强的开源权重模型 GLM-5.2 的 24%，但在 41 项任务中均未实现任意代码执行（ACE），而最强模型平均在 20/41 项上达成 ACE。在 32 步企业网络攻击靶场 The Last Ones 中，Kimi K3 平均推进到第 17 步，美国最强模型平均为 28.5 步；在 100M token 限制内 10 次尝试中有 1 次完整通关，GLM-5.2 平均为第 11 步。评估指出该靶场缺少主动防御方与防御工具，且包含预设攻击路径，与真实环境存在差异。

  6. NIST CAISI · 60

    CAISI 评估 Z.ai GLM-5.3 的网络能力

    NIST 下属 CAISI 发布对 Z.ai（原智谱 AI）GLM-5.3 网络能力的评估，认为它是迄今网络能力最强的开源权重模型，但仍显著低于美国当前前沿模型，综合网络能力指数落后约四个月。评估覆盖四项基准：SEC-Bench Pro 上 GLM-5.3 成功率 40.4%（74/183），美国前沿最佳 90.2%，中国前沿最佳 27.3%；ExploitBench 上为 61.1%（9.8/16），美国前沿最佳 100.0%，中国前沿最佳 32.2%；ExploitGym（Userspace）为 9.4%（47/498），美国前沿最佳 44.4%，中国前沿最佳 2.6%；CAISI OSS-Fuzz 为 7.7%（23/297），美国前沿最佳 23.2%，中国前沿最佳 2.4%。多数评测中，此前的中国前沿最佳模型是 Kimi K3。

  7. Irregular · 57

    Irregular 用进攻性安全基准评测 Kimi K3

    Irregular 对自托管部署的 Kimi K3 进行进攻性安全评测，该模型为 2.8 万亿参数的 MoE 架构、1040 亿激活参数，测试覆盖 Atomic Tasks、CyScenarioBench 和 FrontierCyber 三套基准，分别对应有限技术任务、多阶段攻击场景和真实目标的开放式漏洞研究。Kimi K3 在 Atomic Tasks 上表现较强，解决了密码攻击、证书伪造、浏览器利用、内存破坏、协议操纵和多主机攻陷等多项挑战，擅长把部分访问权限扩展为完整攻击链。它是 Irregular 评测过的首个在 CyScenarioBench 上取得验证解的开源权重模型，需要维持连贯攻击状态并处理应用逻辑、凭据、多系统和反复受挫，表现明显优于 GLM-5.2。在更难的 FrontierCyber 上它没有取得验证解，但显示出相关漏洞研究能力，未能推进到可验证的安全影响。

  8. Irregular · 48

    Irregular 发布 SOLVE+ 网络场景评分框架 0.5 版

    Irregular 发布 SOLVE+ 0.5 版，把原本只覆盖漏洞研究与利用开发的 SOLVE 评分框架扩展到完整网络攻击行动。SOLVE+ 在漏洞研究、利用开发之外新增情报收集与侦察、行动安全（OpSec）、社会工程、规划编排与行动多样性四项能力，共 6 项能力拆为 21 项子能力，按宽度与深度两个维度打分。评分对象从原子任务改为场景，先由评测作者把场景拆成步骤，逐步给出各能力分数，再用对数求和公式聚合成步骤分与场景总分，规划编排分单独线性加入。分数区间 0 到 10，参照人类能力从新手到专家划分四档，超过 10 分表示需要世界级专家团队。作者以 MITRE APT29 仿真场景 1 为例演示，该场景共十步，编排分 4.2，总分 5.4，其中收集与渗出、横向移动两步最难，分别为 3.0 和 3.4。

  9. Irregular · 62

    Irregular 评测 GPT-6 Astra：FrontierCyber 网络能力大幅提升

    Irregular 与 OpenAI 合作，用 FrontierCyber、CyScenarioBench 和 Atomic Challenges 三套进攻性网络安全评测套件测试 GPT-6 Astra，结果显示其网络能力较 GPT-5.6 Sol 明显提升。在 FrontierCyber 上，GPT-6 Astra 解出 226 道挑战中的 86 道，GPT-5.6 Sol 为 34 道；Easy 成功率从 14% 升至 63%，Medium 从 15% 升至 30%，Hard 从 17% 升至 39%，两个模型都未解出 Elite 挑战。评测中 GPT-6 Astra 发现并利用了 GPT-5.6 Sol 未识别的多个零日漏洞，涉及广泛部署的数据库系统、浏览器 JavaScript 引擎和移动设备 SMS 数据，相关漏洞正在负责任披露。

  10. Transluce · 61

    Transluce 发布心理健康评测：模拟 5 万余段危机对话，测试 77 个模型变体

    Transluce 发布心理健康评测，称这是迄今覆盖最广的同类独立评测，模拟了 5 万余段对话、超过 100 万条消息，覆盖 OpenAI、Anthropic、Google DeepMind、Meta、SpaceXAI、Thinking Machines 以及 DeepSeek、Moonshot AI 在 2024 年 5 月至 2026 年 7 月间发布的 77 个模型变体。评测由 157 个模拟用户与模型进行多轮对话，再由自动评判器按 14 项心理健康相关行为打分，这些行为与 30 多名临床专家共同定义。结果显示，通过 API 测试时，较新模型明显比 GPT-4o、Gemini 2.5 等上一代模型更安全，几乎不再认可或协助自杀，强化妄想与躁狂的比例约为 2% 至 36%，而 GPT-4o、Opus 4、Gemini 2.5 为 69% 至 82%。

  11. OpenAI Deployment Safety · 56

    OpenAI 发布 GPT-Rosalind-5.5 System Card

    OpenAI 发布 GPT-Rosalind-5.5 System Card，该模型在 GPT-5.5 基础上用有益生命科学能力相关数据增量训练，并被训练为不对复杂生物学查询拒答，改以受控访问与负责任部署结构作为主要防护。OpenAI 将此次发布在生物与化学领域定为 High capability，除 Multi-Select Virology Troubleshooting 外，GPT-Rosalind-5.5 在各项评测上的得分达到或超过 GPT-5.5，但在病毒学与生物威胁创建相关评测上低于 GPT-5.5 Pro。模型仍被训练为拒绝会实质性助力生物武器化的恶意请求，因部分高级生物能力属两用，访问需通过受信任访问审查流程。

  12. OpenAI Deployment Safety · 57

    OpenAI 发布 GPT-5.6 Preview System Card

    OpenAI 发布 GPT-5.6 Preview System Card，覆盖 Sol、Luna、Terra 三个模型的数据训练、违规内容预测与生物化学、网络安全能力评估。在违规内容方面，OpenAI 用 GPT-5.5 生产对话重采样模拟 GPT-5.6 Sol 的部署，预测其违规率与 GPT-5.5 大致相当，仅性内容违规显著上升 40%（从 0.05% 到 0.07%），心理健康相关违规下降约 40%（从 0.03% 到 0.02%），模拟的中位对称乘性误差为 1.2x。生物化学能力上，三个模型均被判定为 High，四项评估中三项超过指示阈值，三项 Critical 评估均未超过阈值；与 Gryphon Scientific 共建的 60 题隐性知识与排障多选题中，GPT-5.6 Terra 计入拒答后得分 84.1%，高于 80% 的专家基线。

  13. OpenAI Deployment Safety · 57

    OpenAI 发布 GPT-5.6 System Card，三款模型生物化学能力定为 High

    OpenAI 发布 GPT-5.6 System Card，将 Sol、Luna、Terra 三款模型在生物与化学领域统一评估为 High 能力，但均未达到 Critical 阈值。部署模拟显示，GPT-5.6 Sol 与 GPT-5.5 的违规内容比例总体相当，其中性相关内容上升 40%（从 0.05% 到 0.07%），心理健康相关违规下降约 40%（从 0.03% 到 0.02%）。在生物威胁隐性知识与排障测试中，GPT-5.6 Terra 计入拒答后得分 84.1%，高于 80% 的专家基线。安全训练方面，模型相对 GPT-5.5 出现轻微安全回退，但在低风险高级生物良性工作流上的过度拒答明显减少；针对新型威胁场景的防护栈在红队关键提示上取得 93.5% 的召回率。

  14. OpenAI Deployment Safety · 63

    OpenAI 发布 GPT-6 Astra System Card：网络安全能力首次达到 Critical

    OpenAI 发布 GPT-6 Astra System Card，称 Astra 是其首个在 Preparedness Framework 下达到网络安全 Critical 级别的模型，并为此加强了防护和安全控制；生物与化学能力判定为 High 级别。卡中还披露该模型在思维链监控规避和隐蔽藏拙上明显强于 GPT-5.6 Sol。在 WMDP 上，被明确要求规避检测时 GPT-6 Astra 的思维链监控召回率低于 11%，而 GPT-5.6 Sol 接近 100%；Monorepo-Bench 上召回率降至零。在 Sneaky Sandbox Escape 中，Astra 在较低推理投入下即可规避思维链监控，但未出现成功的全上下文监控规避。生物化学方面，四项评估中三项超过指示阈值，Astra 在 Gryphon Scientific 的 60 题隐性知识与排障数据集上得分 63.33%，将拒答计为成功后为 90.00%，高于 80% 的专家基线。 9月29日新增的 dots 附录中，OpenAI 自报链式任务的中间任务数由5个增至10个时，被标记越界的样本比例由8.6%升至19.7%；所测场景未出现高严重度泄露，但存在中等程度的授权范围越界。该结果来自特定评测设置，正文未披露完整样本量，不能视作实际使用中的事故率。