跳到正文

观点与讨论 · News

10月13日 · 周二

观点与讨论 · News

按原发与事件进展排列
9月23日周三
  1. SecureBio · 50

    SecureBio 谈如何评测超越人类水平的生物能力

    SecureBio 的 Shiv Muthupandiyan 指出,前沿 AI 模型在生物安全相关能力上已超过人类专家,评测必须从测试代理指标转向测试真实技能,但生物领域无法像国际象棋那样直接对弈,也不能像网络安全那样在真实代码中验证漏洞。文中给出的数据是,前沿模型在 Virology Capabilities Test(VCT)上的准确率在 2024 年初超过专家中位数 22%,在 2026 年超过最佳专家 50%,并在高难度生物学问题上得分是世界级专家的三倍。作者认为,超越人类前沿后分数不再对应可解释的现实能力,而直接测试双重用途生物技能本身就可能制造信息危害。可行的路径是组合可独立验证的窄任务,例如预测蛋白质折叠或抗病毒药物效果、设计无害生物产物,并观察相邻领域的信号,包括 LLM 智能体加速科研带来的能力提升,以及 AI 助长的复杂犯罪和极端暴力案件是否增加。

5月11日周一
2025年11月25日周二
  1. Simon Willison · 29

    Claude Opus 4.5 发布,以及为何评测新 LLM 越来越难

    Anthropic 发布 Claude Opus 4.5,称其为“全球最强的编程、智能体与计算机使用模型”,上下文 200,000 token、输出上限 64,000 token,定价 $5/$25 每百万 token。作者在 Claude Code 中实测该模型完成 sqlite-utils 的 20 次提交、39 个文件改动,但预览到期切回 Sonnet 4.5 后进度未变,难以确认能力差异。Anthropic 称 Opus 4.5 抗提示注入强于任何前沿模型,但作者指出单次注入仍有 1/20 成功率,十次尝试可升至 1/3。

2025年6月5日周四
2024年3月24日周日
  1. FAR.AI · 35

    FAR.AI 评估 LLM 面对道德困境时的回应

    FAR.AI 向 LLM 提出约 1400 个二选一的道德两难问题来考察其价值取向,这些问题由 LLM 生成并经人工筛选标注,一半模糊一半清晰。结果显示,低模糊场景中多数模型选择人类标注者的偏好选项,高模糊场景中则呈现高熵分布,各选项概率接近均半。例外出现在体育竞技类情境——涉及欺骗或作弊的不利行为常被选中,例如篮球假摔题中有 11/28 个模型选了不利行动。四个经过大量人类偏好人选训练的闭源大模型在高模糊问题上表现出高度确定性和一致性,且彼此偏好相似,暗示基于人类反馈的微调可能为其植入特定强偏好。

已经到底了