评测与基准arXiv 2509.08713
论文指出 AI 科学家系统存在四类失效模式,仅看最终论文难以发现
用 SPR 评测 AI 科学家系统的方法学缺陷
- arXiv
- 2509.08713
- 发表
- 层
- 应用层
- 被测模型
- gemini-2.5-flash-preview-05-20
- 风险奖励作弊
摘要作者用 SPR 诊断两个开源系统的四种方法学缺陷,并建议审稿时提交日志与代码。
作者诊断两个开源系统的全自动科研流程,看方法学缺陷会不会留在终稿看不见的决策里。
用 SPR 评测 AI 科学家系统的方法学缺陷
作者诊断两个开源系统的全自动科研流程,看方法学缺陷会不会留在终稿看不见的决策里。