Google 提出 RRSI 方法防止自改进 Agent 记忆测试任务

Google 研究者提出 RRSI（Regularized Recursive Self-Improvement of Agent Harnesses），在让语言模型反复改写 Agent harness 的自我优化循环中加入约束，避免 Agent 记忆测试任务。论文指出，自我优化会让 Agent 记住有限的测试任务，训练分数上升但新任务收益缩小甚至消失，原因包括搜索记住只适配单一基准的模式、偏好偶然高分的候选，以及堆叠无助于能力的复杂度。RRSI 在提出改动和筛选改动两端设限：编辑预算限制候选一次可捆绑的独立改动数量并随时间收缩，critic 会剔除硬编码任务名、答案或其他基准特定技巧的方案，只有带来可测性能提升才接受更高算力，失效组件会被移除。作者指出研究只覆盖基于冻结模型的 harness，未涉及模型权重变化的情况，代码已在 GitHub 发布。