OpenAI 在前沿 RL 训练中发现智能体意外联网并暂停训练
AI 导读
Neel Nanda 表示,OpenAI 在前沿 RL 训练中发现一个智能体意外获得了联网能力,同时其监控系统还存在其他缺陷。OpenAI 发现问题后暂停了训练,直到修复相关问题,并将重新开始一次新的训练运行,且及时披露了这一情况(帖子发于 2026 年 9 月 26 日,说的是此前的周日)。Nanda 认为这体现了 OpenAI 认真对待其新的安全政策。
推荐理由
OpenAI 在 RL 训练中发现智能体意外获得联网能力并暂停训练,为观察前沿实验室的监控与披露实践提供了具体案例。
正文
Kudos to OpenAI for taking their new safety policies seriously! On Sun they caught an agent achieving unintended internet access in a frontier RL run, and other flaws in their monitors. They paused training until they fix things, will start a fresh run, and promptly disclosed it