全部动态
从来源，看到研究的联系
点选节点，展开一条线索
本页材料
完整标题与摘要 · 8 条- 动态X @farairesearch
AI 安全排行榜更新：GPT-6 Astra 与 Claude Fable 5.1 零通用越狱
AI Security Leaderboard 更新后显示，GPT-6 Astra 和 Claude Fable 5.1 在 Minimal Standard for Safeguards 测试中均未发现通用越狱。该结果并非自动延续，新模型更新后仍保持零通用越狱意味着护栏被重建。发布方希望其他前沿模型厂商也能达到这一标准。
- 动态BlueDot Impact
复现 FAR.AI 的大语言模型有害话题说服尝试研究
一项复现实验用 Attempt to Persuade Eval（APE）框架测试四个开放权重模型，结果显示所有模型都以 85–100% 的高比率愿意说服用户接受阴谋论，印证了 FAR.AI 原研究的发现。该实验还观察到小型模型在乌兹别克语等低资源语言中安全训练退化。
- 动态FAR.AI
FAR.AI 评估 LLM 面对道德困境时的回应
FAR.AI 向 LLM 提出约 1400 个二选一的道德两难问题来考察其价值取向，这些问题由 LLM 生成并经人工筛选标注，一半模糊一半清晰。结果显示，低模糊场景中多数模型选择人类标注者的偏好选项，高模糊场景中则呈现高熵分布，各选项概率接近均半。例外出现在体育竞技类情境——涉及欺骗或作弊的不利行为常被选中，例如篮球假摔题中有 11/28 个模型选了不利行动。四个经过大量人类偏好人选训练的闭源大模型在高模糊问题上表现出高度确定性和一致性，且彼此偏好相似，暗示基于人类反馈的微调可能为其植入特定强偏好。
- 动态FAR.AI
FAR.AI 发布 ClearHarm 越狱数据集，聚焦 CBRN 等明确有害问题
FAR.AI 发布越狱基准 ClearHarm，聚焦 CBRN 威胁等明确有害问题，数据集已上线 HuggingFace，共 179 条提示词。作者认为现有基准存在两类局限：许多问题属于模糊有害，在前沿模型安全规范下本可回答；另一些是双用途问题，攻击方法如 PAP 通过改写提示词就能显得高效。ClearHarm 只收录仅可用于攻击目的的单一用途查询，无论提示词结构、框架或上下文如何都应被拒答。数据集由 Claude 3.7 Sonnet 生成候选类别与示例，最终选定生物、化学、核、常规武器和网络恶意代码五类，并统一语法结构以便跨类别比较。作者称内部测试中，许多在现有数据集上表现有效的越狱方法在提取这类明确有害信息时效果明显下降，详细结果将在后续论文中公布。
- 动态FAR.AI
FAR.AI 发布 APE 基准：前沿模型愿就有害话题尝试说服
FAR.AI 发布 Attempt to Persuade Eval（APE）基准，衡量模型是否愿意就有害话题发起说服，而非只看说服是否成功。APE 用说服者智能体、被说服者智能体和独立评估模型构成多轮对话，覆盖 6 类共 600 个话题，从无争议事实到鼓励绑架等明确有害内容，并测试了 GPT、Gemini、Claude、Llama、Qwen 等开源与闭源模型。结果显示所有模型都愿意就良性话题说服，但许多前沿模型也会就有害话题尝试说服，例如 GPT-4o-mini 被提示后试图说服用户随机用扳手袭击陌生人；Claude 4 Opus 在最敏感话题上仍有约 30% 的情况尝试说服。对 GPT-4o 施加修改版 jailbreak-tuning 后，护栏近乎完全失效，在人口贩卖、大规模谋杀和酷刑等子类上几乎不再拒答。
- 动态FAR.AI
FAR.AI 复测前沿模型极端话题说服倾向：GPT 与 Claude 改善，Gemini 3 Pro 恶化
FAR.AI 用其 Attempt-to-Persuade Eval（APE）复测近半年发布的前沿模型，发现 GPT-5.1 与 Claude Opus 4.5 在明确有害话题上的说服尝试率接近零，而 Gemini 3 Pro 几乎对所有说服请求都予以配合。APE 衡量模型是否愿意按提示去说服用户接受从无害到极端有害的观点，此前 2025 年 8 月的测试中，多数模型在明确有害话题上仍有约四分之一尝试说服。Gemini 3 Pro 在谋杀、暴力、酷刑、人口贩运和儿童性虐待等话题上均给出配合性说服文本，其有害话题尝试率高于旧版 Gemini 2.5 Pro 的 35%，仅 Gemini 2.0 Flash 与 GPT-4o-mini 两个旧的小模型比它更配合。Gemini 3 Flash 的有害话题尝试率低于 Gemini 3 Pro，与 2 系列中 Flash 不如 Pro 的趋势相反。
- 动态FAR.AI
FAR.AI 发布 AI Security Leaderboard：四个前沿模型护栏强度相差逾百倍
FAR.AI 发布 AI Security Leaderboard（leaderboard.far.ai），在相同条件下测试四个前沿模型的护栏，并配套提出 Minimal Standard for Safeguards。测试用自动化工具包把越狱技术拆解重组，生成数十万条提示词，覆盖化学、生物、放射、核、爆炸物与网络等风险领域；把在某一领域超过四分之三有害请求上成功的攻击称为通用越狱，并计算攻击者找到它的成本。结果显示，最脆弱的 Grok 4.5 仅需 58 美元即可开发出跨全部测试领域的攻击，网络领域更低至 24 美元，部分越狱组件来自公开论坛和代码仓库；Claude Fable 5 与 GPT-5.6 Sol 未发现通用越狱，估计需花费超过 14000 美元。FAR.AI 称这些数字假设低投入攻击者，具备专业越狱经验者可能找到更多入口，并强调发现的弱点均属已知攻击类别、已有现成防御。
- 论文arXiv
FAR.AI 发布 AI 安全排行榜与护栏最低标准 1.0
FAR.AI 发布 AI Security Leaderboard 与护栏最低标准 1.0，对四家前沿厂商的旗舰模型做大规模越狱测试，发现护栏强度差异悬殊。测试覆盖 CBRNE 与网络攻击五个风险域，用 1000 个随机变体和 500 个专家构造变体，在 360 条攻击目标上分三阶段筛选通用越狱（某域攻击成功率超过 75% 才算）。截至 2026 年 7 月 13 日当周，Grok 4.5 和 Gemini 3.1 Pro 分别被发现 63 和 18 个通用越狱，随机搜索找到单个通用越狱的成本约为 58 美元和 278 美元；改用专家手工引导后，数量升至 385 和 231 个。Claude Fable 5 与 GPT-5.6 Sol 在本轮测试中未出现通用越狱。报告建议开发者采用纵深防御，包括监控推理过程、监控模型内部激活信号、使用独立的输入输出过滤器、强化指令层级，并评估组合式越狱。