跳到正文
原文
METR· METR·· 2026-04-01精选关注度62

METR 微调实验:少量指令微调即可提升思维链可控性

Fine-tuning experiments on CoT controllability

AI 导读

METR 发现,用 240 条指令跟随推理数据(约 100K-300K token)对 GPT-OSS-20B、GPT-OSS-120B、Qwen-3-8B、Qwen-3-32B 四个推理模型做微调后,在分布外 CoTControl 评测集上的思维链可控性从平均 2.9% 升到 8.8%。提升最大的是指定大小写推理、抑制特定词和向推理中插入指定句子这几类指令。作者指出 8.8% 绝对值仍低,但说明少量微调即可提升可控性,这一能力可能是模型潜在具备而非新学到的。局限包括前沿实验室不太可能专门为可控性做微调、尚未证明可控性提升会降低可监控性、以及多轮或 Agent 场景下影响不明。

推荐理由

METR 用极少量微调数据测出思维链可控性可从 2.9% 升到 8.8%,为监控可绕过性提供了早期量化证据。

阅读原文metr.substack.com