FAR.AI 欺骗研讨会总结:白盒监测为何比黑盒更有前景
What We Learned at the FAR.AI Deception Workshop | FAR.AI
AI 导读
FAR.AI 举办了一场聚焦 AI 欺骗检测的研究工作坊,Chris Cundy 提出应更多投入观察模型内部计算的白盒监测方法,而非仅检查输出的黑盒监测——后者需要一个至少与被检模型同等能力的可信监视器,且无法获取模型内部持有却未表达的知识。 Neel Nanda(Google DeepMind)、Joseph Bloom(UK AISI)、Micah Carroll(OpenAI)及 Cadenza Labs 的 Walter Laurito 与 Kieron Kretschmar 分别就可错位证据标准、系统可监测性的现状与未来、思维链可监测性以及欺骗检测基准 Liars Bench 做了报告。