澳大利亚 AI 安全研究所发布首份报告，分析跨组织 AI 智能体风险与控制
New report examines risks and controls for AI agents interacting across organisational boundaries
AI 导读
澳大利亚 AI 安全研究所发布首份出版物，委托 Gradient Institute 撰写跨组织 AI 智能体风险报告。报告指出，由各自安全可靠的智能体组成的系统未必安全可靠，多智能体交互会产生新的涌现行为，这既是运营问题也是控制与人类监督问题。报告提出按共同治理程度划分的三层部署框架：单一治理、联邦治理和开放环境，层级越高，新失效模式越多，可用控制手段越超出单个部署组织的范围，需要共享框架、公共基础设施和集体行动。报告为部署组织梳理风险因素、失效模式和控制措施，为政策制定者标出多智能体安全缺口及可填补方，为研究者和标准机构列出多智能体评测方法与智能体基础设施等开放问题。