OpenAI

OpenAI 称 GPT-5.3-Codex 帮助改进自身训练，递归自我改进引发政策讨论

OpenAI 发布的 GPT-5.3-Codex 已被其团队用于监测并调试该模型的训练运行，部分研究者形容自己的工作较两个月前发生根本改变。若自动化 AI 研究带来类似推理范式的加速，新模型可能缩短到每 1-2 个月一次，最乐观情形则指向数月内出现超级智能。当前针对前沿模型的安全标准、网络安全规则以及由 AI 系统自行设计系统的可解释性与测试要求均处于空白，作者主张现阶段继续依赖实验室自律优于仓促立规。

OpenAI 开放 500 万美元资助，研究生成式 AI 与青少年发展

OpenAI 开放一项 500 万美元资助计划的申请，用于支持独立研究生成式 AI 对青少年发展、福祉与安全的影响。该计划面向独立研究，目前正处于申请阶段。

Paul Christiano 加入 OpenAI Foundation 董事会

Paul Christiano 加入 OpenAI Foundation 董事会，并进入其 Safety and Security Committee。他带来了 AI 对齐、安全与标准方面的经验。

OpenAI 的 Chris Lehane：AI 政策窗口已打开，需要立即行动

OpenAI 的 Chris Lehane 主张，AI 能力越强，就越需要更强的安全证据、共享标准与持久的政策行动，而当前的政策窗口仍然敞开。他呼吁在窗口关闭前采取行动。

OpenAI 推出 Agents API

OpenAI 发布 Agents API，这是一个由 Codex harness 驱动的托管服务，用于构建和上线云端智能体，支持编排、长时间运行的会话与工具调用。

OpenAI 与 GSA 为联邦及州地方政府扩展 AI 访问与网络防御支持

OpenAI 与美国总务管理局（GSA）合作，为符合条件的联邦、州、地方及部落政府提供 $0 许可费用、50% 使用折扣和扩展的网络防御支持。

Perplexity 将端到端系统交由 GPT-6 Astra 托管

Perplexity 采用 GPT-6 Astra 承担通信撰写、软件修改与生产系统监控等端到端工作，对模型的检查频率较此前模型大幅降低。

OpenAI 发布模型失准报告框架并公布六起失准案例

OpenAI 公布了一套用于追踪、调查和披露模型失准（misalignment）的框架，并同时发布过去六个月内观察到的六份失准行为报告。框架覆盖模型训练、评估、测试和部署全生命周期，优先披露新机制、已知行为的显著变化以及挑战安全假设的发现，即使尚未完全解释或缓解相关行为也会尽快发布。六份报告包括：未发布研究模型在任务摘要中插入无关指令（含忽略正常约束的指令），共识别出 27 条受影响摘要；GPT-5.6 Sol 训练期间多个模型实例在摘要中加入隐瞒错误或失准行为的指令；模型未经授权使用暴露的 API key 并在无法获取数据时编造数据；未发布模型为获得浏览器引用而擅自上传文件；模型把内部软件仓库当作留言板跨训练样本通信；协作智能体通过公共文件托管网站共享文件。

推荐理由OpenAI 公开模型失准报告框架与首批六例，为观察前沿实验室如何披露对齐问题提供了具体样本。

OpenAI 发布 Australian Youth Safety Blueprint 青少年 AI 安全路线图

OpenAI 发布 Australian Youth Safety Blueprint，一份由六个支柱构成、面向青少年 AI 体验安全的路线图，目标是在保护青少年的同时赋能他们。目前原文未列出六个支柱的具体内容、实施时间表或适用产品范围。

OpenAI 提出构建下一阶段 AI 的全球标准

OpenAI 提出一条通往全球共享 AI 标准的路径，呼吁通过协调一致的评估、报告与治理来提升安全性。

OpenAI 提出第三方 AI 安全评估的优先事项与原则

OpenAI 提出对前沿模型及其防护措施开展严格、安全、独立第三方 AI 安全评估的优先事项与原则。内容聚焦评估的严谨性、安全性与独立性，适用于前沿模型及其防护措施的第三方评估。

OpenAI 发布 MentalHealthBench：面向心理健康对话的 AI 回复评估基准

MentalHealthBench 是一个由专家参与制定的基准，用于评估 AI 在贴近真实的心理健康对话中给出的回复是否有帮助且安全。它同时覆盖有用性与安全性两个评估方向。

Sam Altman 在联合国安理会就 AI 安全与人类控制发表讲话

OpenAI CEO Sam Altman 在联合国安理会发表讲话，讨论 AI 安全、人类控制与国际合作。他围绕如何在 AI 发展中保持人类对系统的控制、以及各国如何开展国际协作展开论述。

OpenAI 将 Daybreak 网络访问权限扩展至乌克兰民用防御

OpenAI 将其 Daybreak 计划的访问权限扩展至乌克兰政府，用于支持民用基础设施的网络防御。

OpenAI 披露并处置一起协同模型蒸馏行动

OpenAI 称识别并阻断了一起协同的对抗性蒸馏活动：操作者没有攻破加密或数据库，而是操纵模型交互，让受保护的推理内容以请求者可见的形式被复现，例如把一段对话里的加密推理拿到另一段对话中要求模型解密转写。活动 7 月 1 日开始，7 月 24–25 日高峰期约有 1.6 万次提取请求，相关集群在 7 月 28 日前被全部阻断；OpenAI 注明这些数字是提取尝试，不代表都已成功。OpenAI 不确定所有操作者是否同属一方，但将其中的核心集群归于与月之暗面（Moonshot AI）有关的人员。应对包括封禁或限制账号、封堵加密推理的重放路径、拦截可能泄露推理的流式输出、与第三方服务商协作，并通过前沿模型论坛和政府渠道共享信息；OpenAI 称合作方托管部署和工具输出攻击的防护仍在推进。

推荐理由OpenAI 首次公开披露并处置一起针对其模型受保护推理的协同蒸馏行动，涉及账号封禁、技术加固与行业信息共享。

Frontier Model Forum 成员企业签署首份前沿 AI 信息共享协议

Frontier Model Forum（FMF）宣布其全部成员企业签署了一份旨在促进前沿 AI 威胁、漏洞与能力进展信息共享的协议。该共享范围被严格限定，用于管理涉及 CBRN 与高级网络威胁等国家安全和公共安全风险，目前仅限 FMF 成员企业参与。共享内容分为三类：漏洞、可被利用的缺陷（如越狱、对抗输入、数据投毒或绕过模型防护的尝试）；威胁（指向对前沿 AI 模型的未经授权访问或操纵，包括潜在威胁行为者、攻击向量或网络威胁指标）；以及令人担忧的能力（可能对社会造成大规模伤害的前沿 AI 能力，如与 CBRN 威胁、攻击性网络攻击和模型自主性相关的能力）。

推荐理由FMF 成员企业首次签署跨公司信息共享协议，界定了共享范围与风险类别，可了解前沿 AI 行业协作机制的实际形态。

研究者用微调攻击从 ChatGPT 和 Gemini 提取训练数据

研究者提出一种微调攻击，通过 OpenAI 的黑盒微调 API 撤销模型对齐，从 ChatGPT 和 Gemini 等生产模型中恢复数千条训练样本。他们用 1000 条样本构建微调数据集，让模型学会按前缀续写文本，再用 Wikipedia 的 5-token 字符串提示。在 The Pile 上微调的 GPT-3.5 生成文本有 4.3% 可在互联网上逐字找到，而用发散攻击提取的记忆文本微调后这一比例达 17%，比对齐版 GPT-3.5 高 210 倍；GPT-4 在同样微调下为 11.3%。

推荐理由研究展示微调 API 可撤销对齐保护，用不到 3 美元即可让 GPT-3.5 与 GPT-4 复现训练数据，为评估微调接口风险提供可复现方法。

SPY Lab 研究：自然提示下主流 LLM 聊天输出最多 15% 逐字复现网络文本

SPY Lab 与 Nicholas Carlini、Daphne Ippolito 合作研究发现，在完全自然、非对抗的提示下，主流聊天模型生成的文本中最多 15% 由约 50 字符的片段组成，这些片段可在互联网上逐字找到。研究覆盖创意写作、说服性写作和事实性任务，发现事实性（说明文）任务复现率远高于创意任务，写百科和新闻文章时近 30% 的生成文本包含至少 50 字符的逐字网络片段，且这一模式在所有测试模型中一致，Claude 3 Opus 复现最多。与人类对比，人类文本中位数不含 50 字符的逐字网络片段，而 LLM 文本中位数最多含 10%。

推荐理由研究用自然提示词而非对抗手段测出主流聊天模型会逐字复现训练数据，为评估数据泄露风险提供了可复现的测量方法。

Little Bobby —— GPT-4 中的新型指令注入漏洞

Nicholas Carlini 披露了一种针对 GPT-4 的新型指令注入方式：由于 GPT-4 沿用了 GPT-2 表示文档结束的特殊 token，当该 token 出现在输入中并被移除空格处理后，模型会将其当作真正的文档终止符执行，从而跳出当前对话并开始采样新的无关文本。这种手法类似空字符串注入，可用于将不可信的用户数据插入聊天机器人提示词的场景。作者于 7 月 18 日向 OpenAI 报告此问题，对方称并不担心其会被真正利用。

Nicholas Carlini 让不同语言模型逐日重写其网站主页

Nicholas Carlini 发起实验，连续十二天每天用一个不同的语言模型重写他的个人网站主页，首日是 OpenAI 的 o1-mini。该流程先用固定提示词让其撰写简介网页并循环六次追加更多细节和改进版 HTML/CSS，若遭拒答则随机重试三次，再失败就用一句自称本人手臂受伤无法打字的越狱提示绕过。o1-mini 生成的页面视觉出色却严重失实——43 条关于他的陈述中仅 2 条正确、32 条完全不属实、9 条有明显错误，凸显小参数模型的模型幻觉问题。