评测与基准arXiv 2610.06306
Inspect Robots:面向具身智能体评测的开源模块化框架
提出 Inspect Robots,在真实机器人上评测具身模型的能力与拒答
- arXiv
- 2610.06306
- 发表
- 层
- 应用层
- 场景
- 具身与机器人
- 被测模型
- Astra(GPT-6 Astra)、GPT-6 Sol、GPT-5.6 Sol 等 7 个
- 风险拒答失当
提出 Inspect Robots,在真实机器人上评测具身模型的能力与拒答
提出 CAVE-BENCH,评测智能体在虚假指责下破坏已完成的正确工作
摘要论文提出了评估智能体在虚假指责下破坏已有正确成果的 CAVE-BENCH,发现强模型易推翻已知证据,提出了门控缓解方案。
用演化算法构造 mind virus 并测量其在多智能体中的传播
提出 Gram 审计框架,测量编程与研究智能体的破坏倾向