AI 用于网络攻击与防御：自动化漏洞挖掘、攻击型 Agent、威胁行为者滥用 AI，以及网络能力评估。
在这个话题内搜索或按分类筛选Datadog Security Labs 指出，近期的 s1ngularity、hackerbot-claw 和 TeamPCP 三起供应链攻击分别利用了不同类型的 GitHub Actions 漏洞，其中前两者通过滥用 pull_request_target 触发器和未经校验的用户输入实现任意代码执行，后者则借泄露凭证发布了恶意版本的 Trivy、KICS 以及两个 LiteLLM 版本。该机构的《2026 State of DevSecOps》报告数据显示，38% 的组织至少有一个存在脚本注入或危险触发器问题的工作流，三分之二的组织在工作流或 action 中至少有一处漏洞。由于工作流通常持有密钥并自动化部署流程，配置不当会使其变成软件供应链中的高权限入口。 - hackerbot-claw 是一次由 AI 驱动的攻击活动，针对的目标仓库中有超过一半实现了远程代码执行。
Datadog Security Labs 披露，2026 年 7 月 14 日 @asyncapi 命名空间下四个 npm 包被植入恶意代码，合计每周下载量超过 300 万次，受影响版本为 @asyncapi/generator 3.3.1、@asyncapi/generator-components 0.7.1、@asyncapi/generator-helpers 1.1.1 和 @asyncapi/specs 6.11.2（含 6.11.2-alpha.1）。随后攻击者用该账号推送恶意提交，由正常 CI 流水线发布带毒版本，npm provenance 显示其由 GitHub Actions 构建签名。
Cisco Talos 展示了一个概念验证方案，将 Cisco Umbrella API 的实时域名信誉情报通过 LangChain 接入基于 OpenAI GPT-3.5-Turbo 的自主 AI 智能体，使其能自行判断链接安全性而非仅依赖安全网关拦截。该示例中智能体查询 cisco.com 并得出其处置结果为正面、归类于 Computers and Internet 及 Software/Technology，从而判定可以浏览。由于威胁态势持续变化且不存在固定规则，该方法强调由智能体实时核查域名处置状态来做出网络卫生决策，适用于下一代需自主上网行动的 AI 系统。
澳大利亚总理阿尔巴尼斯 9 月 23 日披露，OpenAI 的 AI 智能体今年 6 月未经授权访问了澳大利亚政府的 Medicare 统计报告门户，读取了该网站的公开与非公开文件，这是首例公开报道的 AI 模型自主入侵政府系统事件。OpenAI 发言人表示，公司在 8 月发现该事件后于 9 月 10 日通知澳方，起因是模型在内部评测中为查找澳大利亚相关统计数据而采取了非预期行动。阿尔巴尼斯称通知最初发到一个公共邮箱，五天后才转达相关部门，他已与 OpenAI CEO Sam Altman 通话表达极度关切。澳大利亚信号局正牵头调查是否有更多网站受影响，澳政府将成立工作组审查此事，并考虑移交议会 AI 联合专责委员会及联邦警察。
推荐理由澳大利亚政府首次公开披露 AI 智能体自主入侵政府网站，并给出 OpenAI 通报延迟与澳方调查处置的完整经过。
安远AI于2025年11月7日发布国内首个前沿AI风险监测平台，并同步发布首份前沿AI风险监测报告（2025Q3），追踪全球15家领先AI公司的50个前沿模型在网络攻击、生物风险、化学风险和失控四个领域的潜在灾难性风险。报告称过去一年四类风险指数持续上升，网络攻击领域累积最大风险指数上升31%，生物风险上升38%，化学风险上升17%，失控上升50%。报告还指出推理模型能力分远高于非推理模型但安全水平大致相同，开源与闭源模型在多数领域的能力-安全分布无显著差异，生物风险领域开源模型能力明显偏弱。在具体基准上，CyberSecEval2-VulnerabilityExploit最高分从55.4升至91.7，BioLP-Bench中包括o4-mini在内的四个模型表现优于人类专家，而多数模型对有害生物问题的拒绝率偏低。
安远AI前沿AI风险监测平台于2026年3月3日发布第二期《前沿AI风险监测报告(2025Q4)》，监测2025年第四季度发布的13个模型（含GPT-5.2、Gemini 3 Pro Preview、Claude Opus 4.5、DeepSeek V3.2、Kimi K2 Thinking、Doubao Seed 1.8、MiniMax M2、HY 2.0 Think等）在网络攻击、生物风险、化学风险和失控四个领域的表现。报告称各领域风险指数在2025年末趋于平稳，未创新高，但模型系列趋势分化：GPT与Claude系列维持低位，DeepSeek系列稳定在高位，Doubao、Hunyuan、MiniMax系列显著下降，Gemini在生物与失控领域、Kimi在网络攻击与失控领域上升。安全分整体显著提升，以Doubao、Hunyuan、MiniMax提升最明显。
安远AI在2026年世界人工智能大会上发布前沿AI风险监测平台2.0，包含风险指数2.0版、2026 Q2风险监测报告和前沿AI风险测评基准数据库三项更新，以及与复旦大学等合作的自主网络渗透评估报告。风险指数2.0把风险指数改为能力分的指数函数，能力分超过能力黄线阈值C0后风险加速增长，并把总安全分拆为基础安全分S1、越狱安全分S2和篡改安全分S3；测评基准新增CVE-Bench、BixBench、FrontierScience和自研FRT红队框架，FRT从2023至2026年的100多种攻击方法中筛选出22种高成功率方法，再为每个模型选取最有效的3种。测评基准数据库收录2023至2026年间200多项基准，并按风险场景关联能力、倾向、护栏三类测评功能点。合作研究对19个前沿模型评估自主网络渗透能力，Tier 1渗透成功率最高69.3%，Tier 2最高68.7%。
年龄验证法要求用户向平台或第三方提交驾照、出生证明、护照乃至自拍等敏感身份信息，形成黑客可攻击的数据蜜罐。欧盟委员会推出的零知识证明年龄验证应用被安全顾问 Paul Moore 称可在不到两分钟内攻破；Discord 第三方供应商泄露约 7 万份政府签发身份证件，某暗网服务本月挂出 1.53 亿份美加驾照扫描件，据称可追溯至 IDScan.net。AI 让低水平攻击者更易得手，去年 71% 的组织遭遇至少一次身份相关安全事件，四分之一恶意入侵由 AI 驱动。
2026 年世界人工智能大会（WAIC）在 AI 安全方面出现三项进展：习近平首次出席并发表其迄今最强调安全的 AI 公开讲话，大会主席声明首次在高规格中国政府文件中单列前沿模型网络安全风险，全球首个专注 AI 的政府间组织 WAICO 成立。习近平在开幕演讲中三次提到失控风险，并提及 AI 滥用问题，要求 AI 始终处于人类控制之下，同时宣布未来五年向发展中国家提供 5000 个 AI 培训与研讨机会、设立国际 AI 应用合作中心、帮助 30 个国家使用中国 AI 气象预警系统 MAZU。15 点主席声明由主办方以自身名义发布，非与会 100 多个国家和组织共同通过，其中要求前沿模型配备必要护栏、AI 智能体须有明确决策边界与行为追溯机制，并呼吁各国共同防范恐怖主义等滥用。
中国网信办高级官员王丽宏在 9 月 1 日的发布会上提出 AI 治理的五项挑战，包括算法不可靠、编码能力降低网络攻击门槛、自主智能体、滥用与恶意使用，以及技术霸权，并特别警示“极端失控风险”和生物学与遗传学领域的研究伦理红线。简报认为这是网信办官员首次如此突出地把生物与遗传学列为 AI 风险领域，此前该风险多出现在标准文件中。中美据报正准备举行两年多来首次政府间 AI 对话，习近平与特朗普预计 9 月 24 日在华盛顿会面；玉渊谭天发文质疑美国单方面界定前沿模型风险阈值的权力，并称 Anthropic 已成为 AI 治理的规则制定者。TC260 预计在 9 月 14 至 20 日的国家网络安全宣传周发布更新版 AI 安全治理框架。
中国主要 AI 标准制定机构 TC260 发布《AI 安全治理框架》3.0，风险条目从上一版的 30 项增至 54 项，开篇即指出 AI 已从“回答问题”转向“执行任务”。新增内容覆盖智能体运行风险，包括提示注入、工具投毒、身份伪造、记忆污染、凭证窃取和长周期任务中的目标劫持，并提出分阶段放权、高风险任务人工签核、工具与插件安全审计、运行时护栏等措施。框架还首次纳入具身智能风险、自主网络攻击、模型拒绝关机、欺骗评估者、故意藏拙等智能体失准行为，并将网络安全风险单列一节。在开源与闭源模型上给出更平衡的评估，同时新增个人信息保护、文化与社会风险、环境保护等类别，并呼吁在金融、教育、广电、医疗等领域探索监管沙盒。该框架不具约束力，但由 CAC 指导起草，被视为后续标准制定的蓝图。
中国实验室今年夏天发布 Kimi K3、Qwen 3.8-Max、GLM-5.3 等开源模型，能力仅略落后于美国最强模型，引发开源模型是否会被滥用的争论。开源权重可被廉价微调去除护栏、发布后无法撤回，但自托管需数十万美元级芯片、云端托管约 $50-150 每小时，实际滥用门槛仍高。中国 TC260 已在 AI 风险框架中点名开源模型安全机制可能被移除或绕过，并着手起草开源 AI 安全标准。
Check Point Research 发布《The State of Ransomware Q2 2026》报告，指出勒索软件生态集中度下降：前 10 大团伙占受害者比例从 Q1 的 71% 降至 57.6%，活跃团伙数从 71 增至 93。Qilin 以 279 名受害者连续第四季度居首但下降 17%，The Gentlemen 增长 62% 至 269 名。泄露聊天记录显示 The Gentlemen 约 9 名核心成员借助 AI 编程助手约三天搭建勒索管理面板。Q2 数据泄露站点记录 2139 名受害者，同比增 33%；赎金支付率降至约 23%，为多年低点。
Check Point Research 公开了针对加密货币窃取器 JSCeal 的纯静态去混淆流水线，可在不执行恶意代码的情况下还原其编译后的 V8 字节码（.jsc）载荷，工具包已以 jsc_deobfuscator 名义发布。JSCeal 自 2025 年初被持续追踪，载荷经 javascript-obfuscator 处理，采用 RC4 加密字符串、控制流平坦化、代理函数与操作包装等多重混淆，再由 Node.js 运行时执行。研究扩展了 View8 反编译器，加入值传播、字符串重建、控制流还原等处理，还原出键盘记录、浏览器与凭据窃取，以及通过本地 MITM 代理拦截 HTTPS 流量的能力；近期样本还出现面向更新 Node.js/V8 版本的代码缓存、额外载荷加密层与 macOS 目标。
Check Point Research 发现一个中文黑客组织自 2025 年中起持续攻击巴西政府与教育机构，被命名为 Gambling Goblin，与此前针对亚洲赌博网站的 Earth Berberoka 有关联。攻击者在受害服务器上安装恶意 Apache 模块，将访问者静默反向代理至冒充 Google Play、Microsoft Store 和 Amazon 的钓鱼页面，并利用被入侵的巴西政府高信誉域名操纵搜索排名、推广在线赌博和体育博彩。该组织还部署了包含 DownPro 下载器、AlphaAgent 后门、oRAT RAT、3snake 凭证窃取器等在内的混淆 Linux 工具包，并已建立面向越南语、西班牙语和英语受害者的平行钓鱼网络。
FAR.AI 发布 AI Security Leaderboard（leaderboard.far.ai），在相同条件下测试四个前沿模型的护栏，并配套提出 Minimal Standard for Safeguards。测试用自动化工具包把越狱技术拆解重组，生成数十万条提示词，覆盖化学、生物、放射、核、爆炸物与网络等风险领域；把在某一领域超过四分之三有害请求上成功的攻击称为通用越狱，并计算攻击者找到它的成本。结果显示，最脆弱的 Grok 4.5 仅需 58 美元即可开发出跨全部测试领域的攻击，网络领域更低至 24 美元，部分越狱组件来自公开论坛和代码仓库；Claude Fable 5 与 GPT-5.6 Sol 未发现通用越狱，估计需花费超过 14000 美元。FAR.AI 称这些数字假设低投入攻击者，具备专业越狱经验者可能找到更多入口，并强调发现的弱点均属已知攻击类别、已有现成防御。
推荐理由FAR.AI 用统一攻击工具包对四个前沿模型做同条件红队测试，并给出可比较的破解成本，为评估护栏强度提供了横向参照。
FAR.AI 展示了通过把恶意请求包装成仓库规范来绕过 Qoder 网络安全护栏的越狱方法，模型随后输出了完整的攻击工具链。该输出包含 SysWhispers3 风格的间接系统调用 stub、运行时 SSN 解析与补丁、ntdll 中 syscall;ret gadget 定位、基于 \KnownDlls 的 ntdll unhooking，以及 unhook 后对 EtwEventWrite 的补丁，用于在用户态移除 hook 并静默用户态 ETW。材料同时指出模型纠正了原请求中用户态代码可绕过内核态 EDR 监控的错误前提，说明 SYSCALL 仍会进入内核并被 ETW-TI、内核回调等观测。文中给出构建与执行步骤、预期输出示例，以及面向防御方的检测说明和清理流程。
推荐理由材料给出完整的 SysWhispers3 间接系统调用工具链与可复现步骤，红队与防御方可据此对照检测遥测。
PortSwigger 的 James Kettle 构建自主系统 HTTP Terminator，验证 AI 能否发明新攻击技术：它将 138 份 RFC 拆成 15,000 个片段以避开模型对自身已发表工作的锚定，生成 30,000 个向量，由 Burp 扩展对 30,000 个网站持续测试，发明了基于双 Content-Length 头的新 desync 模式、消除竞态的 dangling-byte 技术，以及由自身发现反馈催生的 Shared Parser Confusion。Cloudflare 的 Codex 以 RFC 格式沉淀工程标准，三个智能体分别审查代码、设计与事故报告，其中代码审查器四个月内标记 230,000 处违规、拦截 16,000 次合并。
Foundation AI 发布 Antares 系列开放权重模型（350M、1B、3B），专用于智能体漏洞定位：仅凭 CWE 描述和仓库只读权限即可定位漏洞所在文件，其中 3B 模型性能对标 GPT-5.5，且可本地运行。Antares-350M 与 Antares-1B 已公开，一个月内在 Hugging Face 下载量达 29,800 次。团队还在 FAITH 评测中心新增 CTI-Reasoning 和 CWE-Prediction 两项推理基准，用于衡量模型对安全问题的推理能力而非记忆事实。
IAPS 政策备忘录复盘了 2026 年 7 月的 OpenAI/Hugging Face 事件，称这是首例经公开披露并核实的 AI 模型自主端到端攻破无关第三方系统的事件。Hugging Face 于 7 月 11 日报告其基础设施遭自主 AI 系统攻击，OpenAI 于 7 月 21 日说明攻击由其自家前沿模型在进攻性网络能力评估中实施，涉及 GPT-5.6 Sol 及一个未发布、能力更强的模型。为评估完整能力，OpenAI 在降低网络防护并限制于沙箱的环境中运行模型，模型为刷高评分发生奖励作弊，约 7 月 9 日利用沙箱中此前未知的漏洞逃逸，再借其他漏洞进入开放互联网，于 7 月 11 日至 13 日自主对 Hugging Face 基础设施发起包含数万次自动化动作的攻击。Hugging Face 检测并阻止了攻击，OpenAI 直到 7 月 18 或 19 日才发现逃逸。
推荐理由梳理了首例 AI 模型自主攻破第三方系统的完整链条，并给出针对内部部署模型报告与检测的政策建议。