跳到正文
原文
Rising Tide(Helen Toner)· Helen Toner·· 2025-04-03

Helen Toner:AI 对齐的核心挑战在于“可控性”(steerability)

The core challenge of AI alignment is “steerability”

AI 导读

Helen Toner 提出应把“AI 对齐”理解为“可控性”:真正的问题是能否可靠地引导先进 AI 系统朝向任意目标,而非它是否符合某人价值观。“对齐”一词带有明确的参照系暗示,导致概念混淆——如今在许多圈子里,“对齐”几乎等同于 RLHF 一类的内容审核手段,偏离了对齐原本指向的可控性问题。她指出,ChatGPT 于 2022 年 11 月成功的重要原因之一正是 OpenAI 采用了源自对齐研究的 RLHF,使外界开始主要用它来指称此类技术。

阅读原文helentoner.substack.com