OpenAI 新推理技术 recurrent depth 引发 AI 安全专家担忧
OpenAI’s new reasoning technique alarms AI safety experts
AI 导读
据 The Information 报道,OpenAI 新模型 Astra 将采用名为 recurrent depth(又称 opaque recurrence)的推理技术,让模型以循环方式多次处理同一查询,而非顺序推理,可能使思维链更难监控。Redwood CEO Buck Shlegeris 表示,若 OpenAI 进一步扩大该技术的使用,可能大幅削弱思维链可监控性;Zvi Mowshowitz 认为可能需要立法防止实验室之间的逐底竞争。报道称 Astra 对该技术的使用有限,思维链仍有望保持可读,OpenAI 也否认会转向 neuralese。OpenAI 首席科学家 Jakub Pachocki 在 X 上强调,公司自首个推理模型起就致力于保留并利用思维链监控。