为测试时 AI4AI 的智能体执行环境设计学习元技能
Learning Meta-Skills for Agent Harness Design in Test-Time AI4AI
AI 导读
研究提出 Meta-Skill 元技能,让 Builder 在模型权重冻结的前提下,从 Target 在开发集上的执行反馈中学习"何时需要支持、提供什么资源"的原则,再用冻结的技能库为未见任务构建执行环境。在 Harness-Bench 和 NewtonBench 上,完整技能库的元技能比无技能构建提升宏平均性能 8.95 个百分点,比直接把同一技能库交给 Target 高 12.02 个百分点。同一模型同时担任两种角色时仍有增益,提示可通过学习构建更好环境实现系统级自我改进。