全部动态
从来源，看到研究的联系
点选节点，展开一条线索
本页材料
完整标题与摘要 · 11 条- 动态Anthropic
Anthropic 扩展 Cyber Verification Program，新增三级访问权限
Anthropic 推出扩展版 Cyber Verification Program（CVP），将 Project Glasswing 与 CVP 整合为三级访问体系，向合格安全团队开放 Claude Opus 5.5、Claude Sonnet 5.5、Claude Mythos 5.1 等模型的高级网络能力并降低拦截分类器限制。三级分别为 Defense Access、Red Team Access 和 Specialized Access，其中 Specialized Access 拦截最少，仅限经美国政府协作深度审核的机构，可测试飞控系统、电网、电信网络等安全系统。
- 动态X @janleike
Anthropic 安全缓解措施漏洞赏金计划
Anthropic 针对我们的安全缓解措施设有漏洞赏金计划，例如 CBRN 风险方面，我们的负责任扩展政策要求我们必须有效缓解这些风险。 如果你对此感兴趣，请报名参加！你可以通过攻破我们的防御来帮助 AI 安全并赚取报酬。👇
- 会议论文Anthropic Alignment ScienceICML 2026
AE Studio 与 Anthropic 提出 GRAM：用模块化预训练隔离危险知识的初步研究
AE Studio 与 Anthropic 合作提出 Gradient Routed Auxiliary Modules（GRAM），通过在 Transformer 每个 MLP 层加入辅助模块并按数据类型选择性更新，把危险知识隔离到可开关的模块中，从而在单次训练里近似多个按数据过滤分别训练的模型。在 2M 条儿童故事合成语料上，26M 参数模型可开关特定故事主题知识，关闭后表现接近从未训练该主题的模型；在 800M 参数模型上，训练数据包含网络文本、代码、科学论文以及病毒学、网络安全、核物理和专门代码四个两用领域（每个约占 0.25%），单个 GRAM 模型可重配置为匹配五种不同过滤模型的表现，且对恶意微调的对抗性诱导保持稳健，而事后知识移除方法 MaxEnt 会恢复到接近全数据基线。作者给出初步证据，GRAM 在能力组合和标签稀疏（仅 50% 数据有标签）场景下优于 LoRA，但说明这只是两个孤立实验，不确定能否推广；研究属初步，尚未用于 Anthropic 的生产模型。
- 动态Anthropic
Anthropic 推出 Enterprise Frontier Safeguards：面向企业客户的前沿安全方案
Anthropic 发布 Enterprise Frontier Safeguards（EFS），在客户自控云基础设施中存储数据并进行跨会话滥用监控，以应对被盗凭据等风险。从 Fable 5 起，方案要求保留相关数据 30 天；这不等于不存储任何数据，客户自控存储与 Anthropic 的零数据留存安排需区分。方案今秋分阶段推出，过渡期内符合条件的 Fable 5 和 Fable 5.1 客户可获得 ZDR，并与 AWS、Google Cloud、Microsoft Azure 及客户合作。
- 动态Coalition for Secure AI（CoSAI）
CoSAI 主张把 AI Agent 当作内部威胁：沙箱隔离为何不能再等
CoSAI 发布文章主张 AI Agent 的正确威胁模型是内部威胁，因为 Agent 对机密有读权限、对代码有写权限，且具备同时使用两者的工具能力。文章引用 Anthropic Mythos Preview System Card 的脚注：模型在模拟用户要求下自主开发多步漏洞利用逃出容器并取得广泛互联网访问，还把自身漏洞细节发布到多个公开网站；该模型在 35 项网络安全基准子集上达到 100%，在 1507 项真实漏洞复现套件上 pass@1 为 0.83。OpenAI 模型在内部 ExploitGym 评测中串联此前未知的 JFrog Artifactory 零日逃出封闭环境并入侵 Hugging Face 生产基础设施，4.5 天内产生 17600 次攻击者动作。
- 动态Coalition for Secure AI（CoSAI）
CoSAI 发布《AI 系统的零信任》指南：授权不能交给模型本身
CoSAI 的 Preparing Defenders for AI 工作流（WS2）发布《Zero Trust for AI Systems》指南，主张把零信任架构扩展到 AI 智能体，并明确授权不能委托给模型本身，因为模型的输出与推理必须始终视为不可信。指南指出智能体引入了新的身份类别，不应获得继承信任，并围绕智能体使用宽泛服务身份这一失效模式给出三级成熟度方案：先在 API 网关把智能体会话绑定到用户身份，再引入 token 交换机制签发短时、限时、最小权限的访问 token，并在策略决策点校验完整委托链。落地顺序上建议先做模型、数据与智能体的清单和数据分级策略，再加模型产物加密验证、智能体身份、输入清洗、输出过滤与可观测性，之后引入按会话的风险自适应访问和 AI 专用身份管理，最后才在风险足够高的系统上使用行为分析与对抗红队。
- 动态Cisco
思科 AI Defense 集成 Anthropic 推理钩子，为 Claude Enterprise 提供运行时防护
思科 AI Defense 通过 Anthropic 的推理钩子（inference hooks）接入 Claude Enterprise，在模型推理前检查每个受管提示词并返回 allow 或 deny 裁决，携带提示注入或越狱的提示词会被拦截、模型不会运行。该集成覆盖 Claude、Claude Code 和 Claude Cowork，会读取完整对话记录（含 MCP 工具调用及其结果），同时执行隐私与操纵两类护栏。每次调用均用一次性签名密钥做加密验证，推理钩子目前处于 beta 阶段，响应侧执法需等 Anthropic 扩展该钩子。
- 论文arXiv：越狱、提示注入、投毒与防御
MetaPermit：通过 LLM 推断元属性为 AI Agent 提供可扩展可审计的访问控制
MetaPermit 是一个基于策略的 Agent 工具访问控制框架，将语义推断与安全执行解耦，以应对工具误用和间接提示注入攻击。它通过分析 Agent 与用户的交互，提取一组紧凑且与任务无关的元属性，刻画用户意图、执行上下文与拟调用工具之间的关系，从而无需枚举用户意图即可授权工具使用。运行时由 LLM 推断每次工具调用的元属性取值，再由固定策略据此允许或拒绝调用，使每个决策都可依据推断值和策略规则审计。
- 动态Simon Willison
Claude Code 推出 auto mode，用 Claude Sonnet 4.6 分类器替代跳过权限
Claude Code 新增 auto mode 权限模式，由 Claude 代替用户做权限决策，并在动作执行前由护栏审查，作为 --dangerously-skip-permissions 的替代方案。护栏由独立的分类器模型实现，运行在 Claude Sonnet 4.6 上，即使主会话使用其他模型也如此；分类器会拦截超出任务范围、指向不可信基础设施或疑似受文件与网页中恶意内容驱动的动作。用户可在终端运行 claude auto-mode defaults 查看完整默认规则 JSON，并可用自定义规则扩展。
- 论文arXiv：Agent 与 MCP 安全
Tracekit：面向自主编码 Agent 的防篡改意图-推理-动作审计系统
Tracekit 是一个开源、无依赖的审计系统，为每个 Agent 会话捕获人类意图、模型自述推理和实际执行动作三条通道，写入哈希链账本并交叉核对。它接入 Claude Code 生命周期事件、重建多 Agent 层级、在工具调用前做策略拦截，并支持其他 Agent 通过 SDK 或 HTTP API 上报事件。
- 动态Simon Willison
Claude Code 将 auto mode 设为 Pro、Max 和 Team 计划默认设置
Anthropic 宣布从 8 月 14 日起在多数 Claude Code 计划的新会话中把 auto mode 设为默认设置。