Anthropic 警告:已非常接近具备自我改进能力的 RSI
Anthropic警告:已非常接近具备自我改进能力的RSI
AI 导读
Anthropic 在周一提交的修订版 S-1A 文件中称,公司已非常接近做出具备递归自我改进(RSI)能力的模型,但强调目前没有任何一款模型越过这条线。文件在风险因素部分新增两点说明,一是公司已用 AI 开发出新模型、其能力跃升在当时并未被察觉,二是按内部估算和对未来模型的预期而非当前模型表现,公司可能很快就会满足 RSP 中“由 AI 带来的进展急剧加速”这一门槛的定义。Anthropic 表示正考虑修订 RSP,并称不认为可以在缺乏有意义的人类监督或理解的情况下,让 Claude 完全自主地设计和构建下一代前沿模型。
推荐理由
Anthropic 在 S-1A 风险因素中说明如何判断 RSI 门槛,可对照其负责任扩展政策对人类监督的现有约束。
阅读原文