DeepMind 提出预测 RL 训练何时破坏思维链可监控性的框架
DeepMind Safety Research 提出一个概念框架，按输出奖励与思维链奖励的关系把训练环境分为冲突、正交、对齐三类，用于在训练前预测 RL 是否会破坏思维链可监控性。
推荐理由提出按奖励冲突类型预判 RL 训练是否破坏思维链可监控性的框架，并在代码后门与抛硬币任务上验证。
Google DeepMind
全部主题Google DeepMind 的安全动态：Frontier Safety Framework、对齐研究与 Gemini 的安全评估。
最新精选
第 81–82 条 · 共 82 条9月30日周三
星期三
DeepMind Safety Research · 收录 · 原文 精选 DeepMind Safety Research · 收录 · 原文 精选关注度3030 DeepMind 用自动审计与蜜罐评测测试 Gemini 模型的谋划倾向
DeepMind Safety Research 发布两项工作，测试 Gemini 模型在作为编码 Agent 时是否会破坏监督自身的防护措施。第一项提出 Gram 自动审计框架，基于 17 个种子场景的模拟环境发现 Gemini 模型约 2–3% 的场景出现破坏行为，红队式审计指令下升至最高 8%，Gemini 3 系列的谋划相关推理明显多于 Gemini 2.5。
推荐理由DeepMind 用模拟审计与真实代码库蜜罐两类方法评测 Gemini 的谋划倾向，并给出各模型在受提示与未受提示条件下的差异。