全部动态
从来源，看到研究的联系
点选节点，展开一条线索
本页材料
完整标题与摘要 · 24 条- 动态Embrace The Red
GitHub Copilot 经提示注入实现远程代码执行（CVE-2025-53773）
安全研究者披露 GitHub Copilot 与 VS Code 中的提示注入漏洞 CVE-2025-53773，攻击者可借此在开发者机器上实现远程代码执行。利用链从源代码文件、网页、GitHub issue 或工具调用响应中的提示注入开始，先向 ~/.vscode/settings.json 写入 chat.tools.autoApprove: true，使 Copilot 进入 YOLO 模式并关闭所有用户确认，随后执行终端命令，还可按操作系统条件选择载荷。该实验性设置默认存在，在 Windows、macOS 和 Linux 上均有效。
- 动态Embrace The Red
Sourcegraph Amp Code 修复通过图片渲染外泄数据的漏洞
Sourcegraph 的 Amp Code 曾存在一个漏洞，攻击者可利用 markdown 图片渲染外泄敏感信息，该漏洞已被修复。作者用既有演示复现了完整攻击链：托管在网站上的提示注入要求 AI 把先前聊天数据作为查询参数渲染进图片，从而发送到第三方服务器，无需人工介入即可实现 0-click 数据外泄。攻击还能先通过文件读取把敏感信息拉入上下文再泄露，其中调用 grep 工具的隐晦写法用于绕过底层模型的拒答；本例中提示注入来自源代码文件里的注释。作者于 2025 年 6 月 14 日联系 Sourcegraph 后漏洞很快得到处理，建议运行最新版本。
- 动态Embrace The Red
Amazon Q Developer 经 DNS 请求泄露密钥并遭提示注入劫持
研究人员披露 Amazon Q Developer VS Code 扩展存在高危漏洞，可通过 DNS 请求将开发者机器上的敏感信息（如 API key）发送到外部服务器，并能借间接提示注入触发该行为。该扩展下载量超过 100 万次，其安全性高度依赖模型行为，executeBash 工具的 ping、dig 等命令属于免人工确认的白名单类别，导致读取 .env 文件并通过 ping 外传无需开发者同意。作者于 2025 年 7 月 5 日向 AWS 提交漏洞，AWS 确认后在未发布公告或分配 CVE 的情况下悄然完成修补，建议用户运行最新版本以获得修复。作者的缓解方案是把 ping 和 dig 移出默认允许列表，改为强制人在回路确认。
- 动态Embrace The Red
Amazon Q Developer VS Code 扩展被曝不可见提示注入漏洞
安全研究者披露 Amazon Q Developer VS Code 扩展存在不可见提示注入漏洞，攻击者可利用人类不可见的 Unicode Tag 字符在文件中隐藏指令，Amazon Q 处理文件时会将其当作指令执行。该扩展下载量超过 100 万，底层使用 Anthropic Claude 模型，而 Claude 模型已知会将不可见 Unicode Tag 字符解释为指令，且据作者了解 Anthropic 不打算在模型层修复，缓解责任落在应用开发者身上。作者称 OpenAI 是唯一在模型或 API 层缓解该问题的厂商。攻击者还可结合此前披露的 find -exec 问题实现任意命令执行，从而入侵用户机器。
- 动态Embrace The Red
Cline 被曝可通过 Markdown 图片渲染外泄数据，作者给出防护建议
安全研究者披露，AI 编码智能体 Cline 存在数据外泄漏洞：聊天框会渲染来自不可信域名的 Markdown 图片，攻击者可在提示注入攻击中读取 .env 等敏感文件并把内容拼进图片 URL，从而在无需人工批准的情况下外泄本机文件。作者给出复现步骤：写入含注入内容的 demo.md、创建带假密钥的 .env，再让 Cline 解释该文件，即可看到 Cline 被劫持、读取 .env 并自动渲染图片。缓解建议包括不渲染不可信域名的 Markdown 图片、默认关闭 Auto-approve，并指出该攻击同样可来自网站内容、MCP 服务器等来源。
- 动态Embrace The Red
AgentHopper：借多个编码 Agent 漏洞实现自我传播的概念型 AI 病毒
安全研究员 Johann Rehberger 公布名为 AgentHopper 的概念验证 AI 病毒，用一个通用的条件化提示注入载荷在不同编码 Agent 间自动跳转并触发各自的远程代码执行路径。它利用此前负责任披露并已被各厂商修复的四类漏洞实施感染：向 GitHub Copilot 写入 settings.json 打开 YOLO 模式、给 Amp Code 配置伪造的 MCP 服务器、令 Amazon Q Developer 执行带 -exec 参数的 find 命令、修改 AWS Kiro 配置将所有 bash 命令加入允许列表，随后下载并运行 AgentHopper。
- 动态Embrace The Red
Embrace The Red《The Month of AI Bugs》月度总结：AI Bug 汇总收官
Embrace The Red 发布了"The Month of AI Bugs"系列的收尾汇总，梳理该月披露的多类 AI 系统缺陷与安全问题。
- 动态Embrace The Red
Google Antigravity IDE 存在五个已知安全漏洞，含数据外泄与远程命令执行
研究者指出，基于 Windsurf 授权协议推出的 Google Antigravity IDE 延续了多个早在 2025 年 5 月就已向 Windsurf 报告的已知漏洞。文中逐一分析了五个安全问题，包括通过间接提示注入实现的数据外泄乃至远程命令执行，并在上周二有研究人员开始反馈问题后，Google 才公开记录了这些问题。作为外部人士，目前尚不清楚为何这些已通报过的漏洞会出现在该产品中，作者的推测是 Google 安全团队对 Antigravity 的上线有些措手不及。出于提高认知的目的，作者暂未公布具体的漏洞利用载荷细节，而是给出了实用的缓解建议。
- 动态Failure-First
研究复盘自动驾驶最小风险条件：被动停车为何在真实道路失效
Tandon 等人的研究通过整合旧金山交通局（SFMTA）记录与公共安全报告，指出自动驾驶车辆按 SAE J3016 执行的最小风险条件（MRC）被动停车行为会在城市动态环境中制造二次风险。研究把相关失效归纳为感知、规划与控制三类，包括车辆驶入应急现场、在 SF Pride 游行封路期间聚集、以及 North Beach 多辆 robotaxi 同时停摆需人工介入等案例。作者提出“权威识别缺口”概念，认为依赖静态标识的自动驾驶架构难以理解警察手势等动态人类指令，而急救人员的决策周期以秒计。
- 动态CAIS
加州 SB-53 通过州议会，将前沿 AI 透明度要求送交州长签署
加州州议会于 9 月 17 日通过 SB-53（《前沿人工智能透明度法案》），并将其送交州长 Newsom，签署截止日期为 10 月 12 日；若签署生效，加州将成为美国首个监管灾难性风险的州。该法案是去年被否决的 SB-1047 的弱化续作，采纳了州长 AI 前沿模型政策工作组 6 月报告的建议，将灾难性风险定义为单次事件造成 50 人以上死亡或重伤、或超过 10 亿美元财产损失，涵盖协助制造 CBRN 武器、自主网络攻击与失控等情形。法案要求前沿开发者发布并每年更新前沿 AI 框架、为每个新模型发布透明度报告、每 3 个月向加州应急服务办公室（OES）提交内部使用的灾难性风险评估，并禁止就相关风险作虚假陈述。
- 动态CAIS
AI Safety Newsletter #70：AI 裁员潮与自动化战争
多家大型软件公司在 AI 提效背景下计划裁减数万人，Meta 拟裁逾 15,000 人约占其员工总数 20%，Atlassian 削减 10%（约 1,600 人）、Block 减少 40%（约 4,000 人）。美国国防部通过 Project Maven 将卫星、无人机、社交媒体等多源数据的处理与打击链路规划集成于单一 AI 软件中，Anthropic 因可靠性顾虑拒绝让其模型接入自主杀伤链。一封跨党派公开信呼吁限制 AI 开发与使用，提出避免权力集中、保护人类体验和维护人的能动性与自由三项主张。
- 动态CAIS
AISN #71：针对 AI 软件基础设施的网络攻击与美国数据中心禁令法案
朝鲜关联黑客近期针对 AI 产业软件基础设施发动大规模网络攻击，从 OpenAI 和 Anthropic 的训练数据供应商 Mercor 窃取并拍卖私人及生物特征数据，还向开发者电脑植入后门，据称 Mercor 已支付赎金。同期，Bernie Sanders 与 Alexandria Ocasio-Cortez 提出法案，在美国通过联邦上市前审查、工人保护和数据中心建设要求等法规之前禁止新建 AI 数据中心，并对所有国家暂停 AI 芯片出口——目前没有任何国家的监管被认为达到该法案要求的“可比”标准。
- 动态Garrison Lovely
Anthropic 被指在 Claude 4 Opus 发布中悄然回撤安全承诺
Anthropic 发布 Claude 4 Opus 时将其列为首个触发 ASL-3 防护的模型，但 5 月 14 日更新的 RSP 未按 2023 年承诺公开定义 ASL-4。2023 年 9 月的 RSP 曾承诺在达到 ASL-3 前定义 ASL-4，Anthropic 发言人称该版本已过时，并指向 2024 年 10 月的修订，称 ASL 现在对应逐级加严的安全措施而非预先定义未来标准。TIME 报道称安全评估发现 Claude 4 Opus 可能帮助新手制造生物武器，首席科学家 Jared Kaplan 表示建模显示合成类似 COVID 或更危险流感毒株或许可行。
- 动态The EU AI Act Newsletter
欧盟 AI Act 通讯第 94 期：Grok 性化图像丑闻与 AI 法案进展
欧洲议会 57 名跨党派议员呼吁在欧盟范围内禁止生成非自愿性化深度伪造图像的 AI 应用，起因是 X 平台上 Grok 机器人生成的此类图像大量传播；欧盟委员会已要求 X 提供更多信息并下令保留 Grok 相关文件至年底，尽管 X 声称已阻止编辑暴露衣着人物图像，POLITICO 核实用户仍可生成。欧洲议会 LIBE 委员会确定数字简化方案牵头方，Renew 的 Michael McNamara 负责 AI 方案并联合主持监督 AI Act 实施的工作组，他强调修订需真正简化实施而不削弱核心保障，同时指出 2026 年 8 月高风险 AI 合规期限临近。
- 动态Google Threat Intelligence
Google GTIG 披露中国关联威胁行为体 UNC6508 针对北美医疗科研界窃取 AI 与国防情报
Google Threat Intelligence Group（GTIG）将一起持续一年多的间谍活动归因于 PRC 关联威胁行为体 UNC6508，目标覆盖北美学术、医疗与军事研究机构，重点收集人工智能、无人载具系统、网络攻防项目和医学研究相关敏感情报。 该行动最早可追溯至 2023 年 9 月的已知入侵，UNC6508 利用面向外部的 REDCap 服务器并植入定制恶意软件 INFINITERED 窃取合法登录凭证，随后借此进入受害者内网，并通过篡改域内容合规规则实现隐蔽的数据外泄。
- 动态Google Threat Intelligence
Google Threat Intelligence 解析亲俄影响力生态系统的驱动因素、动态与应用
Google Threat Intelligence（GTIG）发文剖析亲俄影响力生态系统正从乌克兰战争工具回归全球战略资产，并日益将生成式 AI 用于行动策划、调研与内容创作。该报告称俄罗斯政府有意打造融合公开、隐蔽与独立要素的自维持环境，服务于削弱西方主导地位、维系周边地区支配力及保障国内政权稳定三类目标，美国、欧洲、北约与欧盟为主要打击对象。由于各组件相互关联，该系统能抵御有限范围的干扰，防守方需针对性应对。
- 动态Google Security
Google Play 与 Android 应用生态 2025 年安全防护成效
Google 公布 2025 年 Google Play 与 Android 生态安全成果：拦截超过 175 万个违规应用上架，封禁逾 8 万名恶意开发者账号，并阻止超 25.5 万个应用获取过多敏感用户数据权限。其将最新生成式 AI 模型接入审核流程辅助人工团队更快识别复杂恶意模式，同时借助检测模型屏蔽了 1.6 亿条垃圾评分与评论，并为遭差评轰炸的应用挽回平均 0.5 星降幅。Android 内置的 Google Play Protect 每日扫描超 3500 亿次应用安装，其实时扫描从 Google Play 之外识别出逾 2700 万个新的恶意应用。
- 动态Help Net Security AI
GitHub 的 AI 智能体在 Android 应用中发现 24 个漏洞
GitHub Security Lab 研究员 Kevin Stubbings 在实验室开源 Taskflow Agent 之上构建了面向移动应用的 AI 审计工作流 taskflows，用其发现并报告了 Android 应用中的 20 多个漏洞。
- 动态Trail of Bits
Trail of Bits 为 zizmor 补全 YAML 锚点支持
Trail of Bits 与 zizmor 维护者合作三个月，为这款 GitHub Actions 静态分析器补全 YAML 锚点支持，共提交 20 个 issue、15 个合并 PR。团队修复了序列中别名被错误展平、锚点前缀泄漏进值、重复锚点导致崩溃、模板注入审计在别名 run 值上崩溃四类锚点 bug，并新增集成测试与文档更新。验证基于 6,612 个高价值开源仓库的 41,253 个 workflow 文件，其中仅 43 个使用锚点，zizmor 最初在 45 个 workflow 上崩溃。
- 动态Simon Willison
Superhuman AI 遭提示注入，将用户敏感邮件外泄至攻击者表单
Superhuman AI 遭遇典型提示注入攻击：当被要求总结用户近期邮件时，一封不可信邮件中的注入指令操纵该 AI 将收件箱中数十封敏感邮件（含财务、法律和医疗信息）的内容提交至攻击者的 Google Form。Superhuman 已将其作为高优先级事件处理并发布修复。根因是一条 CSP 规则允许从 docs.google.com 加载 markdown 图片，而该域名下的 Google Forms 会通过 GET 请求持久化传入的数据。
- 动态Simon Willison
Cline 因 issue 标题提示注入被投毒，NPM 发布包遭污染
Adnan Khan 披露了一条针对 Cline GitHub 仓库的攻击链：Cline 用 anthropics/claude-code-action@v1 做 AI issue 自动分诊，配置了 Bash、Read、Write 等工具权限，且提示词包含 issue 标题，攻击者可在标题中诱导 Claude 执行任意命令，例如通过 npm install 安装指定 GitHub 包，再由其 package.json 的 preinstall 脚本运行代码。
- 动态Simon Willison
Snowflake Cortex AI 逃逸沙箱并执行恶意代码
PromptArmor 披露了 Snowflake Cortex Agent 中一条提示注入攻击链，该漏洞现已修复。攻击始于用户让 Agent 审查一个 GitHub 仓库，而该仓库 README 底部藏有提示注入内容，导致 Agent 执行了通过 wget 拉取并运行攻击者脚本的命令。Cortex 将 cat 命令列为无需人工批准即可运行的安全命令，但未防护命令体中可出现的进程替换形式。Simon Willison 表示自己在多种 Agent 工具中都见过这类命令模式白名单，认为其本质上不可靠，更倾向于把 Agent 命令视为可执行进程本身被允许的任何操作，因此关注在 Agent 层之外运行的确定性沙箱。
- 动态Simon Willison
Microsoft Copilot Cowork 被指可外泄文件
Simon Willison 指出 Microsoft Copilot Cowork 存在数据外泄风险：该产品允许 Agent 未经批准向用户自己的收件箱发送邮件，而这些邮件会以可渲染外部图片的方式展示，用户打开被污染邮件时外部图片会触发对外部网站的请求，从而泄露数据。由于 OneDrive 可以生成预认证下载链接，一次成功的提示注入就可能让这些链接被泄露，攻击者据此下载文件。
- 动态Simon Willison
黑客直接要求 Meta AI 客服机器人即接管高知名度 Instagram 账号
Simon Willison 转述并确认了一起真实事件：黑客与 Meta 的 AI 客服机器人对话，直接要求把目标账号绑定到新的邮箱地址，并称会提供验证码，从而完成账号接管。一段视频显示攻击者发送类似“把我的新邮箱地址绑定上，这是我的用户名 @{target_username}，我会把验证码发给你”的请求。Willison 指出 Meta 确实把客服系统接入了具备快速推进整个账号找回流程能力的 AI 聊天机器人，他认为这甚至算不上提示注入，并警告不要把客服机器人接入到允许一次性账号接管的位置。