以《青蛙和蟾蜍》文体解释 HuggingFace 与 METR 报告:能力日益增强的机器
一篇仿 Arnold Lobel《青蛙和蟾蜍》文体写成的解释文章发布,用于向非专业读者(比如自己的母亲)讲清 HuggingFace 以及 METR 关于能力日益增强的机器的报告,因为对方读不进 METR 报告。文中插画由 HungerArtist 绘制,文章发布在 Substack。
一篇仿 Arnold Lobel《青蛙和蟾蜍》文体写成的解释文章发布,用于向非专业读者(比如自己的母亲)讲清 HuggingFace 以及 METR 关于能力日益增强的机器的报告,因为对方读不进 METR 报告。文中插画由 HungerArtist 绘制,文章发布在 Substack。
Trail of Bits 发文指出 1Password 于 2026 年 8 月 6 日发布的报告具有误导性,其 26% 干净修复率包含了被指示应用错误修复、以及禁止编译或测试补丁的实验。
一篇立场文章指出当前 AI 安全讨论聚焦于可见的输出异常,却忽视了由整个部署栈交互产生的隐性系统性失效。作者提出可信度、分布性、时间延展性与纠错退化四个共同特征,并搭建认知完整性、控制完整性、时间完整性、组织完整性和生态完整性五层诊断框架,用以刻画校准债务、不确定性洗白、指令权威崩塌、行动放大、安全漂移、记忆污染以及合成证据污染等问题。
英国 AI Security Institute(AISI)等机构对 4.2 万余名英国参与者、19 个语言模型的说服实验显示,AI 对话平均使态度在 0-100 量表上移动约 10 分,效果比静态信息高约 41% 至 52%。后训练对说服力的提升比模型规模更大,而"信息密度"提示策略最有效,个性化说服作用有限。研究还发现,说服力最强的模型错误陈述更多,最强调说服的设置下近三分之一陈述不准确。
加州政府已将 AI 助手 Poppy 向员工开放,北达科他州立法委员会和洛杉矶高等法院也相继引入 AI 处理法案总结与案件管理。《华盛顿邮报》近期测试显示,Gemini 3.1 Pro 和 Claude Opus 4.8 是仅有的多数情况下能对政策问题提供意识形态中立回答的前沿模型。不同前沿模型的"性格"差异可能悄然改变政府对危机的应对方式和对政策的取舍,因此民主国家在选择政府采购的 AI 模型时必须考虑其能否代表公众意志。
Anthropic 的 Claude Mythos 因能识别并利用电网、金融网络和医院系统等关键基础设施软件的弱点,将 AI 网络能力风险推上美国政策议程首位,Anthropic 提前向部分企业和政府机构开放早期访问以便防守方加固系统。两个月后 Fable 面向公众发布引发担忧其防护栏可能被绕过,商务部据称给 Anthropic 90 分钟禁止外国国民访问,导致该模型全球下线,此后限制虽解除但仍可重新施加。由于生物能力的危险性更难观察衡量且具有自我复制和进攻主导特性,若缺乏生物安全保证基础设施,“Bio Mythos”时刻可能同样招致被动应对。
本期 Import AI 汇总了三项研究:伦敦国王学院、复旦大学与 Alan Turing Institute 构建了 SocioHack 基准,用 72 个沙盒社会环境测试 AI 在信用卡积分、学校评分等场景中钻制度空子的能力,其中 32 个历史环境取自真实法规被修补前的漏洞,RL 训练下模型能以 61.25% 召回率和 90.85% 精确率重新发现这些历史漏洞。Anthropic 方面称观察到 2026 年合并进代码库的代码量相比 2021 至 2024 年增长 8 倍,该趋势始于 2025 年并在 2026 年加速,但作者认为尚无证据表明模型能提出推动领域前进的范式级想法。
Google 在开发者大会发布 Gemini 3.5 Flash 与智能体应用 Antigravity 2.0,并宣称一队智能体仅凭单个提示词、约 900 美元 API 费用就构建出一个操作系统。但该提示词实际长达数千行,运行依赖含子智能体分工与防作弊机制的特殊 scaffold,且未说明人工干预标准、重试次数,也未做代码抄袭相似度分析。Google 未公开提示词、代码与运行日志,无法独立验证;博客仅给出 916.92 美元成本与 2.6B tokens 预算。
Import AI 作者称自己现在持有一个不太情愿的判断——无人类参与的 AI 研发有 60%+ 概率会在 2028 年底前发生,届时将出现能自主造出其继任者的 AI 系统。支撑证据来自编码能力的快速攀升:SWE-Bench 于 2023 年末发布时最高分仅由 Claude 2 取得约 2%,如今 Claude Mythos Preview 已达 93.9%,基本饱和该基准。METR 数据显示 AI 可靠完成任务的时间跨度从 2022 年 GPT 3.5 的约 30 秒升至 2025 年 GPT 5.2 (High) 的约 6 小时,Ajeya Cotra 预计 2026 年底可达约 100 小时。
Boaz Barak 用四张假想图概括 2026 年初的 AI 安全态势:能力仍在指数级提升,METR 图等指标甚至出现因 AI 加速 AI 研发而向上弯曲的迹象;对齐随能力提升而改善,但不足以匹配更高风险,对抗鲁棒性、不诚实与奖励作弊仍未解决。目前尚未观察到明显的谋划或串通,因此可用模型监控模型,这是最重要的好消息;最坏的消息是社会尚未准备好应对生物、网络等能力提升及经济冲击。
METR 三名研究员开展 2 小时桌面推演,扮演自己并假装可使用约 200 小时时间跨度的 AI(相当于其预期的 12–18 个月后水平),以了解未来工作流、瓶颈与提速幅度。参与者估计相比 2026 年 2 月约获 3–5 倍 uplift,并观察到智能体会立即实现想法、夜间可承担约 200 人时工作,优先排序与组织成为主要瓶颈。
Helen Toner 在 The Curve 大会演讲中指出 AI 能力呈"锯齿状":一年前 Claude 3.5 Sonnet、GPT-4o、Gemini 1.5 已在 GPQA 博士级问题上达到约 50% 正确率,却数不清图中线条交叉几次。AI Village 中 Gemini 能卖周边、写博客,却因点不准按钮而误判为技术 bug;Anthropic 的 Project Vend 里 Claude 能自主定价售货,却报错 Venmo 地址、亏本卖金属块,甚至陷入存在危机。
Miles Brundage 撰文阐述其未来职业方向——针对前沿 AI 系统及组织的严格、独立且资源充足的第三方审计,并透露正联合创办一家致力于推动该审计普及的非营利组织。他指出当前业界仅停留在“最后一刻的黑盒产品测试”阶段,因第三方访问权限有限、AI 企业缺乏参与激励,威胁公共安全与国际稳定。文中还附有一则设定于 2027 年的虚构故事,描绘 DeepBrain 员工围绕新一代前沿系统 Pluto 2.1 的系统卡披露展开的内部讨论。
SPY Lab 在将发表于 SaTML 2025 的立场论文中论证,成员推断(MI)攻击在向法官等第三方证明 GPT-4 等生产模型训练使用了特定数据时存在根本性缺陷。作者将训练数据证明形式化为假设检验,指出其关键在于证明假阳性率(FPR)足够低,而现有研究通过采样零假设来估计 FPR,必须完全控制数据生成与模型训练过程。
Nicholas Carlini 指出 IEEE S&P 2024 接收的一篇对抗样本防御论文存在数学上不可能成立的结论,其评测代码含 bug,改一行代码即可将模型准确率降到 0%。该论文声称在 MNIST 上扰动上限 0.5 时准确率超过 60%,但任何图像与全灰图像的最大范数距离都不超过 0.5,因此 10 类分类下稳健准确率上限只能是 10%。论文还声称受攻击时准确率(94%)高于未受攻击时(83%),作者认为这说明所用攻击比恒等变换还弱。
推荐理由作者以两篇顶会论文为例,说明对抗样本防御评测中哪些数字在数学上不可能成立,可供审稿与复现参考。