跳到正文
原文
METR· METR·原文 · 入选 精选关注度67

METR 复盘 AI 生物 RCT:五个关于证据型 AI 政策的经验

Five lessons from having helped run an AI-Biology RCT

AI 导读

METR 作者复盘其参与组织的 AI 生物随机对照试验(RCT),总结出五条面向证据型 AI 政策的经验。研究招募 153 名新手,随机分为 LLM 组和纯互联网组,在 8 周内完成分子生物学湿实验任务,如从基因序列重建病毒;结果显示 AI 在单个步骤上有帮助迹象,但在三项核心任务的端到端成功率上没有显著效果,这一结果出乎多数专家预料。

推荐理由

作者以亲历者身份复盘 AI 生物 RCT 的组织经验,为理解基准与真实能力差距提供了可迁移的方法视角。

阅读原文metr.substack.com