能力研究同样扩展安全-有用性帕累托前沿
Capabilities research expands the safety-usefulness Pareto frontier too
AI 导读
Redwood Research 提出，把安全研究定义为"在不显著牺牲有用性的前提下提升部署安全"会把几乎所有能力研究也算作安全研究，例如推理性能优化让更弱更安全的模型被更广泛使用。作者认为该标准不充分：开发者必须在帕累托前沿上选点，安全研究通常引导其选择更高安全，能力研究则相反，因为危险 AI 更有用。作者同时指出，在政治意愿远高于当下的未来情形下，某些能力研究可能成为提升安全的有效方式。