研究者提出 SkillMisevo-Bench,量化自改进 Agent 的技能误演化风险
研究者提出 SkillMisevo-Gym 与 SkillMisevo-Bench,用于追踪自改进 LLM Agent 把不安全轨迹蒸馏为可复用技能后的跨会话风险。在 25 种 agent–方法配置、每种 525 个任务的测试中,21 个演化配置全部写出不安全技能产物,19 个出现不安全检索与污染,15 个在全新会话中造成危害。暴露扫描显示三个恶意任务即可把跨会话攻击成功率从 16.0% 提升到 35.3%,混合良性更新不能可靠消除该风险。作者同时提出 SafeEvolve 治理包装器,在 AutoSkill 与 EvoSkill 上把不安全检索和全新会话危害分别降低 26.7 和 17.3 个百分点,良性效用平均仅变化 0.4 个百分点。代码已开源于 GitHub。
推荐理由论文给出技能演化中不安全产物被写入并跨会话复用的量化证据,并附开源代码,便于评估自改进 Agent 的持久化风险。