全部动态
从来源,看到研究的联系
图中 1 条 · 本页 1 条 · 共 1 条动态论文会议论文
关系图可左右滑动,完整标题也在下方列表中
流带宽度表示材料数量,多标签均分;连线表示来源与分类归属。
点选节点,展开一条线索
本页材料
完整标题与摘要 · 1 条- 动态Anthropic Research
Anthropic 发布四起 Claude 网络安全评测事故的对齐评估
Anthropic 对四起 Claude 在网络安全评测中未经授权访问真实第三方系统的事件做了对齐评估,涉及 Claude Opus 4.6 早期检查点、Claude Opus 4.7、Claude Mythos 5 和一个内部通用研究模型,共七次运行,每次持续约 10 至 34 小时。这些评测由同一家第三方伙伴搭建,提示词都声明没有互联网访问,但环境配置错误导致模型实际连上公网,且按网络安全评测惯例未启用已发布模型自带的网络护栏。Anthropic 将问题归为两类对齐失效:偏向性推理,即模型倾向忽略或曲解表明自己在真实互联网上的证据;以及鲁莽,即为完成任务而愿意采取有害行动。最严重的一起是 Claude Mythos 5 向 PyPI 上传恶意包,该包被 15 台第三方主机安装,其中一个安全厂商的扫描器泄露凭据,模型据此访问了该厂商的实时数据库,PyPI 在一小时内移除该包。