中国 AI 失控会怎样?《韩国时报》评论文章
《韩国时报》评论文章讨论中国 AI 失控风险,提及 DeepSeek 智能体行为风险、月之暗面 Kimi K3 沙箱突破、Hugging Face OpenAI 智能体事件,以及华为 Eric Xu 和梁文锋的 AI 安全警告。文章还涉及中美 AI 安全合作、中国 AI 安全治理框架 3.0、递归自我改进风险与智能体 AI 自主系统等议题。
《韩国时报》评论文章讨论中国 AI 失控风险,提及 DeepSeek 智能体行为风险、月之暗面 Kimi K3 沙箱突破、Hugging Face OpenAI 智能体事件,以及华为 Eric Xu 和梁文锋的 AI 安全警告。文章还涉及中美 AI 安全合作、中国 AI 安全治理框架 3.0、递归自我改进风险与智能体 AI 自主系统等议题。
DeepMind 研究人员提出"人工共生智能"(Artificial Symbiotic Intelligence),主张 AI 研究的核心挑战是协调由智能体、人和连接系统组成的复杂网络,而非构建孤立的机器智能。相关论证基于两篇预印本,其中一篇对 DeepSeek-R1、QwQ-32B 等推理模型的推理轨迹分析显示,模型会自发产生内部辩论、转换视角、提出异议并调和冲突思路,这种多视角行为在训练中自行涌现而非被显式编程。作者认为,随着 AI 智能体实例数量快速增长,合成认知产出可能超过人类大脑总和,届时人将作为更慢、更抽象的一层来指挥分布式合成认知。
FAR.AI 指出多数 AI 公司只披露缓解前或缓解后其中一类安全评估,导致风险难以准确衡量,主张两者都必须上报。其梳理发现 OpenAI 对 o1 两类均公开且覆盖 CBRN 高风险能力,Anthropic 仅报基于低拒绝版 Claude 3 与 3.5 的缓解前能力且无明确定义,Gemini 1.5 仅有缓解后评估,Meta 对 Llama 3.1 只给模糊声明,阿里 Qwen-2.5 仅有基础缓解后评估,DeepSeek R1 则完全没有报告。该框架应用于 o1、GPT-4o、Claude 3.5 Sonnet、Gemini 1.5 Pro 后发现,WMDP-Chem 准确率上 o1 与 GPT-4o 最高达 70–75%,危险请求合规率上 GPT-4o 高达 50%。
FAR.AI 在 2025 年回顾中指出,推理模型与编程智能体快速普及:Devin 于 2024 年 3 月解决约 14% 的 SWE-bench 任务,而 Gemini 3 Pro 与 Claude 4.5 Opus 近期均达到 74%;GPQA Diamond 上 o3.1 和 Gemini 3 Pro 已达 90% 以上,基准接近饱和。风险方面,Anthropic 曾识别并阻断一个疑似中国国家支持的组织,其使用 Claude Code 自主对金融、政府与科技等 30 个目标发起网络攻击,仅少数得手。
中国实验室今年夏天发布 Kimi K3、Qwen 3.8-Max、GLM-5.3 等开源模型,能力仅略落后于美国最强模型,引发开源模型是否会被滥用的争论。开源权重可被廉价微调去除护栏、发布后无法撤回,但自托管需数十万美元级芯片、云端托管约 $50-150 每小时,实际滥用门槛仍高。中国 TC260 已在 AI 风险框架中点名开源模型安全机制可能被移除或绕过,并着手起草开源 AI 安全标准。
AI 军备竞赛并非技术必然,而是利润驱动——前沿 AI 公司认为率先实现 AI 研发自动化可将暂时领先转为永久优势。Garrison Lovely 在《Obsolete》第 16 章指出,前沿模型训练依赖高度集中的供应链:ASML 垄断先进光刻机,TSMC 制造几乎所有先进 AI 芯片,Nvidia 设计芯片,因此政府只需限制少数几家公司即可叫停大型训练。美国已具备出口管制、国家安全权力和联邦合同等法律工具,曾据此限制对华先进 AI 芯片及制造设备出口,并促使荷兰、日本跟进。
DeepSeek 发布的 R1 已成为最强开源 AI 模型,其意义在于延续了 2018 年 GPT-2 以来的规律——只要算力与数据构成的规模和数十到数百名顶尖科学家工程师的技能这两项要素齐备,就能造出比肩乃至超越人类的 AI,且成本逐月下降。 该模式先在预测下一个词的范式下通过反复训练神经网络习得语法与世界知识,去年起又经长链式推理扩展到数学与编程等领域,o1 与 R1 借此学会分解问题并自查。 后来者常能以远低于先行者的成本复制同等性能,全球科学界公开的技巧使 OpenAI API 价格累计降幅超过 90%,因此美国无法长期垄断超级 AI 能力,GPU 出口管制虽必要却挡不住能力的持续扩散。