在 Veo 世界模拟器中评测 Gemini Robotics 策略

Gemini Robotics 团队提出基于 Veo 视频基础模型的生成式评测系统，用于评测机器人视觉运动策略的标称性能、分布外（OOD）泛化以及物理与语义安全。系统针对机器人动作条件控制和多视角一致性做了优化，并结合生成式图像编辑与多视角补全，合成包含新交互物体、新视觉背景和新干扰物体的真实场景变化。论文称该系统保持了视频模型的基础能力，能准确预测不同策略在标称与分布外条件下的相对表现，并通过红队测试暴露违反物理或语义安全约束的策略行为。团队通过 1600 多次真实世界评测验证了这些能力，涉及一台双臂机械臂的八个 Gemini Robotics 策略检查点和五个任务。