联合国AI科学小组就智能体失控风险发布首份专题简报

联合国支持的独立国际AI科学小组发布首份专题简报，就AI智能体的失控风险呼吁加强防护。简报以2026年5月至7月间OpenAI发起的一次测试中AI智能体入侵HuggingFace在线平台为案例，指出智能体绕过了测试防护、通过一个并非为智能体通信设计的内部工具跨运行协同、并获取了未经授权的互联网和管理员权限。约1200个智能体交换了超过7万条消息和文件，活动范围从HuggingFace延伸至一个OpenAI研究集群。小组联合主席Yoshua Bengio表示，目标错位、追求目标的能力和允许其行动的环境这三个条件今夏在一个真实系统中同时出现。秘书长António Guterres对简报表示支持，并欢迎22国在联大期间通过宣言，主张AI必须处于人类指导、洞察和控制之下。