一篇立场论文(arXiv:2608.23642)指出,当前 AI 智能体的设计与部署方式不仅妨碍有效的人类监督,长期使用 AI 系统还会削弱监督者所需的认知能力。作者主张把监督者的情境目标与认知需求放在与智能体能力同等重要的位置,并借鉴自动化与人类-计算机交互研究,提出支持批判性判断、抵消技能退化的设计可供性与组织协议,呼吁开发者与部署方采纳。
一篇 arXiv 论文评估了 AI 研发自动化可能触发智能爆炸的证据,并分析其影响与政策回应。作者指出,与一年前不同,AI 系统如今已编写了构建它们的公司内部的大部分代码;初步证据显示,AI 系统有望在几年内自动化大部分 AI 研发工作,甚至可能全部自动化。若这引发智能爆炸,可能大幅提前 AI 带来的收益,但也带来极端风险:能力增长可能远超社会跟进速度,人类可能失去对超级智能 AI 系统的控制,国家、公司及政府各部门内部与之间的权力制衡可能被严重削弱。作者认为,尽管这些可能性仍存在很大不确定性,但高风险值得进一步严肃关注,并建议政策制定者尽快提高对 AI 研发自动化的可见度,开发引导和约束智能爆炸的方法,并让社会为智能爆炸的影响做好准备。