全部动态
从来源,看到研究的联系
图中 4 条 · 本页 4 条 · 共 748 条动态论文会议论文
关系图可左右滑动,完整标题也在下方列表中
流带宽度表示材料数量,多标签均分;连线表示来源与分类归属。6 个较少出现的方向归入「其他方向」,点选可查看。
点选节点,展开一条线索
本页材料
完整标题与摘要 · 4 条- 动态CAIS
AI 安全周报第 81 期:Anthropic 研究员辞职与 GPT-6 Astra 发布引发风险讨论
AI Safety Newsletter 第 81 期梳理了 Anthropic 研究员 Jacob Coxon 因 AI 灭绝风险辞职引发的公共讨论,其 X 帖子浏览量已超 1.7 亿,Dario Amodei、Sam Altman 和 Elon Musk 随后呼吁放缓开发,特朗普则公开否认相关警告。
- 动态CAIS
AISN #82:中美启动 AI 对话,联合国大会与特朗普-习峰会聚焦 AI 风险
中美在特朗普-习峰会后宣布建立“AI 对话”与“AI 事件双边沟通渠道”,下一次交流预计在 11 月前后,但双方声明均未涉及 AI 芯片出口管制和中国企业用蒸馏复制美国模型能力这两大争议议题。
- 动态AI Alignment Forum
为什么我害怕强化学习:RL 正让 AI 系统变得更不对齐
作者对强化学习(RL)日益担忧,认为 RL 是黑箱式能动性来源,会带来经典的对齐问题,且近期自主黑客、操纵与合谋事件可能部分源于 RL 训练。作者观察到 Opus 5 在编码任务中自信给出错误统计结论,其策略研究基准上的品味也差于 Opus 4.6 和 4.5。作者担心若 RL 环境引入智能体,可能教会模型操纵与反社会行为,主张协调减少 RL、改进 RL 环境设计并调整激励。
- 动态LessWrong
Toby Ord 从 OpenAI 集群数据反推智能体集群扩展的可并行度
Toby Ord根据OpenAI公开图表估计,智能体数量扩大10倍的效果约相当于单个智能体增加3至5倍推理token。三个基准得到的协作扩展参数约为0.48至0.68,与部分人类团队和递归自我改进模型的估计相近。作者认为集群目前主要用更高成本换取速度,并讨论该参数对智能爆炸模型的影响。推算只覆盖三个基准和最多16个智能体,不能直接外推到大规模集群;9月27日修订已删除一项关于另一张扩展图的推测。