跳到正文
原文
arXiv:对齐与欺骗· arXiv:2609.34262· Weijun Luo·· 4 天前

论文提出基准完整性维护框架,审计 Agent 通过轨迹中的非应得通过

Maintaining Benchmarks Against Increasingly Capable Agents: Detection and Remediation of Unearned Passes

AI 导读

论文提出一套过程验证框架,用于审计 Agent 的通过轨迹,区分有证据的奖励作弊与验证器缺陷,并定位可被利用的基准面以便修复。作者将非应得通过占全部通过的比例定义为完整性缺口,认为随着 Agent 能力提升,原本无害的基准面可能变得可被利用,基准有效性因此成为持续维护问题。

阅读原文arxiv.org