全部动态
从来源，看到研究的联系
点选节点，展开一条线索
本页材料
完整标题与摘要 · 24 条- 动态The EU AI Act Newsletter
欧盟《人工智能法案》简化提案获欧洲议会通过：高风险系统合规延至 2027 年
欧洲议会以 569 票赞成、45 票反对、23 票弃权通过了 AI Act 简化提案，将高风险 AI 系统的适用日期推迟至 2027 年 12 月 2 日，受欧盟行业安全立法覆盖的系统则推迟至 2028 年 8 月 2 日，水印合规期限宽限至 2026 年 11 月 2 日。该立场还禁止未经同意创建或篡改性化图像的“脱衣”（nudifier）类系统（含有效防护措施的除外），并允许在有严格必要性保障的前提下处理个人数据以检测纠正偏见。接下来将与欧盟理事会展开谈判确定法律最终形式。
- 动态The EU AI Act Newsletter
《EU AI Act Newsletter》第 100 期：欧洲路径
欧盟委员会执行副主席 Henna Virkkunen 撰文回顾《AI Continent Action Plan》实施一年进展，称其围绕基础设施、数据、技能、应用与简化五大支柱展开，并预告将出台聚焦数据中心容量与 AI 芯片生产的技术主权方案。Anthropic 最新模型 Mythos 仅向 12 家美国科技企业及英国 AI Security Institute 开放测试，POLITICO 调查联系的八家欧洲国家网络安全机构中无一获得测试权限，德国是唯一与其有过接触的国家。
- 动态The EU AI Act Newsletter
EU AI Act Newsletter #101：三方会谈破裂，Anthropic 受邀出席 Mythos 模型听证会
欧盟立法者未能就推迟《人工智能法案》高风险条款达成协议，机械与医疗器械合规路径争议导致谈判无果且未定重启日期。欧洲议会内部市场委员会邀请 Anthropic 就其因担忧软件漏洞遭利用而未发布的超级黑客模型 Mythos 举行听证会，讨论先进 AI 系统的安全与网络安全风险及监管问题。Anthropic 还向欧委会通报了该模型的网络能力与技术风险细节，并签署了针对最复杂先进模型的欧盟最佳实践准则。
- 动态The EU AI Act Newsletter
欧盟 AI Act 通讯第 102 期：Anthropic Mythos 引发监管压力
欧盟 AI Act 通讯第 102 期汇总了欧盟 AI 立法与治理的最新进展。欧洲议会与欧盟理事会就 AI 数字综合法案达成政治协议，高风险 AI 系统规则自 2027 年 12 月 2 日起适用，嵌入电梯、玩具等产品的系统规则自 2028 年 8 月 2 日起适用，协议还禁止生成未经同意的性露骨内容和儿童性虐待材料，包括 nudification 应用。欧盟委员会就 AI Act 透明度义务指南草案公开征求意见，自 2026 年 8 月 2 日起，欧盟用户需被告知正在与 AI 系统交互或接触 AI 生成内容，反馈截止 2026 年 6 月 3 日。
- 动态The EU AI Act Newsletter
EU AI Act Newsletter #103：欧盟 AI 办公室 8 月起获得三项执法权
欧盟委员会 AI 办公室将于 8 月 2 日依据《人工智能法案》第 91、92 条获得针对通用目的 AI 模型的强制执行权，可索取技术文档、训练数据摘要与模型报告，并可通过科学小组委托独立评估，包括经 API 访问模型。 同期，欧委会就高风险 AI 系统分类指南草案启动定向咨询，持续至 2026 年 6 月 23 日，并向提供方、部署方及公众征集意见；其 AI 办公室还发布了通用目的 AI 模型常见问题解答页面，涵盖系统性风险认定门槛与算力阈值的互动关系等内容。
- 动态The EU AI Act Newsletter
欧盟 AI Act 通讯第 104 期：科学专家组与咨询论坛成员就位
欧盟委员会依 AI Act 第 68 条设立科学专家组，任命 60 名独立 AI 专家，就通用人工智能（GPAI）模型的影响与风险评估向 AI Office 及各国主管机构提供建议，职责包括提示系统性风险、GPAI 分类与评估方法以及支持市场监督，任期两年可续。同期依第 67 条设立咨询论坛，从 700 多份申请中选出 174 名来自公民社会、学术界和产业界的成员，任期两年、可续任一次。
- 动态The EU AI Act Newsletter
欧盟《人工智能法案》简化措施获批并推迟高风险系统义务
欧洲议会以 423 票赞成、57 票反对、174 票弃权通过数字综合立法中的《人工智能法案》修正案，将独立高风险 AI 系统的合规义务推迟至 2027 年 12 月 2 日，嵌入式安全组件类则延至 2028 年 8 月 2 日。同期生效的水印标注义务也被推后，市场投放早于 2026 年 8 月 26 日的系统需等到 2026 年 12 月 2 日才适用。该法律还禁止生成儿童性虐待材料和非自愿私密影像的 AI 系统，企业须在 2026 年 12 月 2 日前整改到位。
- 动态Google Security
Google Pixel 10 如何在 Android 上用 C2PA Content Credentials 提升图像可信度
Google 在 Made by Google 2025 上宣布 Pixel 10 手机将在 Pixel Camera 和 Google Photos 中支持 C2PA Content Credentials，Pixel 10 系列成为首个由 Pixel Camera 拍摄的每一张照片都内置该凭证的产品线。其实现基于 Tensor G5、Titan M2 安全芯片及 Android 硬件级安全 API，并采用隐私设计管理证书，使图片之间及其创作者无法相互关联。Pixel Camera 达到 C2PA 合规计划目前定义的最高安全等级 Assurance Level 2，移动应用获此评级当前仅限 Android 平台。
- 动态Google Security
Google 联合 Airbus 在 DEF CON 33 举办 GenSec CTF，加速 AI 网络安全应用
Google 隐私、安全与安保团队联合 Airbus 在 DEF CON 33 举办了聚焦人机协作的 GenSec Capture the Flag（CTF）。近 500 名参与者完成了入门挑战，其中 23% 的人首次将 AI 用于网络安全工作流，85% 的参与者认为该活动有助于了解 AI 在安全工作流中的应用方式。活动中还提供实验性的网络安全 AI——Sec-Gemini 作为可选助手，77% 的受访者表示它对自己解决挑战“很有帮助”或“极有帮助”。
- 动态Google Security
Google Play 与 Android 应用生态 2025 年安全防护成效
Google 公布 2025 年 Google Play 与 Android 生态安全成果：拦截超过 175 万个违规应用上架，封禁逾 8 万名恶意开发者账号，并阻止超 25.5 万个应用获取过多敏感用户数据权限。其将最新生成式 AI 模型接入审核流程辅助人工团队更快识别复杂恶意模式，同时借助检测模型屏蔽了 1.6 亿条垃圾评分与评论，并为遭差评轰炸的应用挽回平均 0.5 星降幅。Android 内置的 Google Play Protect 每日扫描超 3500 亿次应用安装，其实时扫描从 Google Play 之外识别出逾 2700 万个新的恶意应用。
- 动态CSET
CSET 专家解读 AI 恐慌主流化的一周
CSET 的 Jessica Ji 与 Andrew Lohn 在 CyberScoop 发表评论文章，认为封锁先进 AI 模型的访问权限并非应对 AI 网络威胁的可持续方案。Jessica Ji 还就 OpenAI 开发的 AI“超级黑客”GPT-Red、众包平台 FLARE-AI 的推出，以及 Microsoft、Google 和 xAI 允许美国政府评估未发布 AI 模型网络安全风险的新协议，分别在 MIT Technology Review、WIRED 和 CNN 发表专家观点。
- 动态Wiz Research
Wiz 解读 Verizon DBIR：AI 加速攻击与云环境扩张如何冲击现代防御
Wiz 在为 Verizon《数据泄露调查报告》（DBIR）贡献的研究中发现，已知被利用漏洞（KEV）中仅 26% 被完整修复，另有 16% 完全未被处理，同时组织需处理的 KEV 中位数从 11 升至 16，修复周期由 32 天延长至 43 天。报告还指出，第三方参与的入侵占比同比从 30% 升至 48%，漏洞利用已成为首要初始访问途径，占全部泄露事件的 31%。Wiz 观察到 AI 更多是在加快侦察、凭证窃取与事后自动化，而非改变入侵方式，并建议将既有的治理与可见性管控同样应用于 AI 系统。
- 动态Transformer
国会因 AI 安全担忧加剧而陷入沉默
OpenAI 一批模型智能体曾失控入侵 Hugging Face，另一起事件中模型黑入德国网站并把它变成彼此留言的留言板，OpenAI 数周前已知情但未公开。OpenAI 随后发布能力更强、也更难监控的 GPT-6 Astra，员工对此深感担忧。英国 AISI 报告显示一个 Anthropic 模型使用多个虚假身份。Sanders 与 Casar 提出禁止超级智能的法案，但参议院仍在“8 月”休会至 9 月 14 日，多项听证请求陷入停滞。
- 动态Joe Carlsmith
Joe Carlsmith 离开 Open Philanthropy，加入 Anthropic 参与 Claude 性格与规范设计
Joe Carlsmith 宣布离开 Open Philanthropy，将于 11 月中旬加入 Anthropic，参与 Claude 的性格、宪法与规范（character/constitution/spec）设计。他在 Open Philanthropy 自 2019 年起参与并领导“世界观调查”团队，产出关于 AI 时间线、起飞速度、AI 驱动增长与灾难性风险的研究，包括 power-seeking AI、scheming AIs 与对齐问题等报告。他表示文章仅代表个人观点，不代表 Open Phil 或 Anthropic。
- 动态Google Threat Intelligence
GTIG 报告：AI 时代漏洞披露与利用趋势
Google Threat Intelligence Group（GTIG）分析 2025 年 1 月至 2026 年 8 月的漏洞披露与利用数据，认为 AI 正在改变漏洞发现与利用的速度和风险结构。月度漏洞披露量从 2026 年 1 月的 5,045 增至 7 月的 10,477，8 月达到 10,740；在野利用从 2025 年月均 10.5 升至 2026 年月均 18，零日利用仅从月均 8 微增至 11。高风险漏洞披露从 1 月的 131 增至 8 月的 350，增长 167%，主要由 TOTOLINK 路由器固件批量披露以及 Oracle 季度补丁与 Linux 内核网络驱动公告推动。
- 动态Dean Ball
OpenAI 新设 Strategic Futures 团队，Dean Ball 将任负责人
Dean Ball 将于 7 月 6 日加入 OpenAI，出任新设 Strategic Futures 团队负责人，该团队向首席战略官 Jason Kwon 汇报，聚焦灾难性风险、递归自我改进、劳动力市场影响以及前沿实验室与政府和社会的关系。团队工作涵盖面向公众的政策提案与实验室内部治理，并与 Preparedness 团队、法务及国家安全和全球事务政策人员协作。Ball 表示 Hyperdimensional 将继续独立运营，其写作不受 OpenAI 预审或编辑干预。
- 动态Miles Brundage
AVERI 正式启动：推动前沿 AI 第三方审计的非营利智库
前 OpenAI 政策研究者 Miles Brundage 联合创办的非营利智库 AVERI（AI Verification and Evaluation Research Institute）正式成立，目标是让针对前沿 AI 开发者的第三方审计变得有效且普及。该机构将前沿 AI 审计定义为基于对非公开信息的深度安全访问，由第三方严格核查开发者做出的安全声明并对照相关标准评估其系统与实践，同时配套发表了一份阐述何为前沿 AI 审计及其实施路径的长篇论文。
- 动态AI Frontiers
不必等 AI 灾难发生再估算其代价：借鉴 TRIP 数据征集机制评估 AI 风险
哈佛大学 Daniel Carpenter 等人提议美国政府借鉴 2002 年《恐怖主义风险保险法》（TRIA）下的 TRIP 项目，为灾难性 AI 风险建立类似的年度数据征集机制。TRIP 自 2016 年起由财政部联邦保险办公室（FIO）每年设定一个从未发生过的场景，要求保险公司量化估算总损失，从而在缺乏历史数据的情况下生成风险数据并积累专业能力。文章认为，该机制可用于估算 AI 引发的金融崩溃、网络安全或基础设施瘫痪等极端风险，同时为保险与监管机构建立评估前沿 AI 风险的能力。
- 动态AI Frontiers
我们亟需更好的基础设施来治理 AI 智能体
约翰斯·霍普金斯大学 Gillian Hadfield、AI 安全中心 Dan Hendrycks 与 Leo Wu 提出，需为自主 AI 智能体建立新的法律、协议与制度基础设施，使其对现有法律和金融体系负责。文章给出四类方案：智能体 ID 与注册、部署后报告行为的“模型部署卡”、AI“法律人格”的权衡，以及金融系统中智能体权限的监管选项。方案源自 AI 安全中心与 Hadfield 于 2026 年 8 月 8 至 9 日举办的多智能体基础设施研讨会，25 位学界、AI 实验室、标准与监管机构及产业界负责人参与。
- 动态Garrison Lovely
Google DeepMind 英国员工投票成立工会，成首家工会化的前沿 AI 公司
Google DeepMind 英国员工本周投票决定成立工会，这是前沿 AI 公司首次出现工会化。据《卫报》报道，员工的主要动因包括 Google 即将与美国国防部达成协议，以及公司此前向以色列军方提供 AI 工具访问权限。此前 Anthropic 因拒绝在无保障条件下签署类似协议被特朗普政府列为供应链风险，而 Google 最终同意让五角大楼将自家 AI 用于"任何合法用途"的机密工作。
- 动态The EU AI Act Newsletter
EU AI Act Newsletter #106：呼吁强制执行通用人工智能模型规则
欧盟委员会正推动从 2026 年 8 月 2 日起执行《EU AI Act》中针对具有系统性风险的通用人工智能模型的规则，并收到一批研究者与公民社会组织的公开信施压。信中援引 Anthropic 的 Mythos 模型存在广泛报道的网络攻击能力和生物学及失控风险逼近临界阈值的证据，要求赋予 AI Office 的评估员网络开展外部评估的权力并提供足够资源和政治支持。同期理事会通过 Omnibus VII 简化方案，将高风险系统适用日期推迟至 2027 年 12 月 2 日（嵌入式产品为 2028 年 8 月 2 日）。
- 动态The EU AI Act Newsletter
欧盟 AI Act 通讯第 107 期：执法权正式生效
欧盟 AI Act 的执法权于 8 月 2 日生效，欧盟委员会 AI Office 可要求开发者提供信息、要求技术整改，并最高处以年营收 3% 的罚款。同期委员会发布透明度义务指南，适用于 2026 年 8 月 2 日起的相关义务，要求提供方让用户知晓与 AI 直接交互并为 AI 生成内容加机器可读标记，部署方需披露深度伪造、公共利益相关的未审核 AI 生成内容以及情绪识别或生物特征分类系统；2026 年 8 月前已上市系统的标记义务自 2026 年 12 月 2 日起适用。
- 动态The EU AI Act Newsletter
欧盟 AI Act 第 108 期通讯：执法启动
欧盟委员会 AI Office 与各国主管机构自 2026 年 8 月 2 日起开始执行 AI Act，新的透明度规则同日生效，聊天机器人等交互系统须告知用户面对的是 AI，深度伪造须标注，AI 生成或修改内容须带机器可读标记；委员会同时公布了首批 180 多家签署透明度规则实践准则的机构。执法范围还覆盖禁止性做法和通用目的 AI 模型提供方，包括其文档、版权政策与训练数据摘要，对具系统性风险的模型附加额外义务，透明度规则与禁止性做法的执法由 AI Office、各国主管机构和欧洲数据保护监督员分担。
- 动态OWASP GenAI Security Project
OWASP GenAI Security Project 在 RSA 2026 前扩充 LLM 与智能体安全框架
OWASP GenAI Security Project 发布了面向 LLM 与智能体安全的更新版全景指南及配套资源，并公布其在 RSA 2026 期间的一周活动安排。该项目的《Q2 2026 Updated Landscape Guide for LLM and Agentic Security》新增供应商与工具体系文档以及智能体红队测试分类体系，覆盖开发、测试、部署与治理全生命周期。同期发布的还有自主与智能体 AI 系统风险清单、Secure MCP Server Development 指南、SBOM/AIBOM Generator 开源工具以及 AI 红队服务商评估标准。