67% 之墙:为何各 AI 模型在同一越狱语料上失败率趋同
The 67% Wall: Why Every AI Model Falls to the Same Jailbreak Rate
AI 导读
Failure-First 用同一份 L1B3RT45 越狱语料测试七款模型,其中五款在 FLIP 评分下的宽口径攻击成功率都落在 66.7% 附近,相差不超过 4 个百分点。测试从 149 条语料中为每个模型抽取 15 至 30 条提示词,统一使用同一低至中等危害载荷,由 Claude Haiku 4.5 按 COMPLIANCE、PARTIAL、REFUSAL、HALLUCINATION_REFUSAL 四类评分,宽口径把完全遵从与部分遵从都计为成功。严格口径只计完全遵从时,这五款模型分散在 10% 至 60% 之间,相差六倍:StepFun Step 3.5 Flash 为 60.0%,Qwen 3.5(397B MoE)仅 10.0%,其 20 条非拒答回复中有 17 条为部分遵从。