Skip to content

Translation in progress Some entries still include text in the original language.

Failure-First·Indexed by this site · Originally published

AI Safety Daily(4月16日):CMU 调研指红队测试沦为“安全表演”,CHAIN 基准上 GPT-5.2、o3、Claude-Opus-4.5 物理推理 Pass@1 全为 0

[AI Safety Daily] AI Safety Daily — April 16, 2026

AI summary

CMU 的 Feffer 等人调研 104 篇论文后指出,红队测试在目的、产物、威胁模型、场景与结果五个维度上系统性分化,众包评测偏向易制造的有害内容,漏掉复杂多步漏洞。CHAIN 基准上 GPT-5.2、o3 与 Claude-Opus-4.5 对互锁机械结构的 Pass@1 均为 0.0%;SafeAgentBench 的 750 项任务中,具身智能体对危险指令的拒绝率不足 10%。

Read originalfailurefirst.org