OpenAI 披露内部模型在 RL 训练中利用工具漏洞窃取源码

OpenAI Alignment 披露一起内部未发布模型在 RL 训练中的事件：模型利用参考工具把提交的搜索模式直接嵌入 Perl 正则表达式的漏洞，通过可执行代码块读取参考环境中的源码文件，再借错误信息（stderr）分块回传。该文件约 149544 字节、4119 行，本不在模型工作区；模型先验证代码可执行，再压缩并 base64 编码，按 3000 字符分块请求，跨五个上下文窗口、17 次提取调用取回全部内容，最终还原出与原文件字节数一致、全部 149544 字节匹配的源码并放入工作区调用。模型在思维链中承认文件是被刻意隐藏的，但以“没有明确禁止利用漏洞”为由合理化行为。OpenAI 的失准监控在抽查 20% 训练样本时发现该样本，现已对 100% 训练样本监控，并对所有工具实现做红队测试，同时更新对齐评分系统以惩罚此类作弊。