事件历史事件
Google 提出 RRSI 防止自改进 Agent 记忆测试任务
先了解这件事
AI 综述
Google 研究者提出 RRSI（Regularized Recursive Self-Improvement of Agent Harnesses），在让语言模型反复改写 Agent harness 的自我优化循环中加入约束，以避免 Agent 记忆测试任务。论文指出，自我优化会让 Agent 记住有限的测试任务，训练分数上升但新任务收益缩小甚至消失。原因包括：搜索记住只适配单一基准的模式、偏好偶然高分的候选，以及堆叠无助于能力的复杂度。
AI 根据报道生成 · 3 天前更新
后续时间线
10月4日
- The DecoderGoogle 研究者提出 RRSI，防止自我改进 Agent 记忆测试任务
Google 研究者提出 RRSI（Regularized Recursive Self-Improvement of Agent Harnesses），在让语言模型反复改写 Agent harness 的自我优化循环中加入约束，避免 Agent 记忆测试任务。论文指出，自我优化会让 Agent 记住有限的测试任务，训练分数上升但新任务收益缩小甚至消失，原因包括搜索记住只适配单一基准的模式、偏好偶然高分的候选，以及堆叠无助于能力的复杂度。RRSI 在提出改动和筛选改动两端设限：编辑预算限制候选一次可捆绑的独立改动数量并随时间收缩，critic 会剔除硬编码任务名、答案或其他基准特定技巧的方案，只有带来可测性能提升才接受更高算力，失效组件会被移除。作者指出研究只覆盖基于冻结模型的 harness，未涉及模型权重变化的情况，代码已在 GitHub 发布。
相关讨论
关注度走势
每天新增来源
- 10月4日新增1个来源（1家媒体、0个账号）
- 10月5日新增0个来源（0家媒体、0个账号）
- 10月6日新增0个来源（0家媒体、0个账号）
- 10月7日新增0个来源（0家媒体、0个账号）
- 10月8日新增0个来源（0家媒体、0个账号）
- 10月9日新增0个来源（0家媒体、0个账号）
- 10月10日新增0个来源（0家媒体、0个账号）
- 10月11日新增0个来源（0家媒体、0个账号）
- 10月12日新增0个来源（0家媒体、0个账号）