跳到正文
原文
科技行者·本站收录· 原文发表精选关注度42

同样的文字,不一样的权力:AI 提示词注入中的保留词元实验

同样的文字,不一样的权力:一次关于AI提示词注入的隐秘实验

AI 导读

一篇题为《Byte Authority》的论文发现,同一段伪造对话标记以保留词元编码发送时,比拆成普通子词更容易攻破 AI 智能体。在 Llama-3.1-8B 上,保留词元时提示注入成功率为 98.2%,拆分后降至 39.7%,低于纯文本注入的 51.6%;Llama-3.1、GLM-4.5 和 Seed-OSS-36B 三个模型的保留身份效应达到 39 到 66 个百分点。Qwen3-8B 因生成思考过程而差距仅 8.1 个百分点,强行关闭思考后升至 49.8 个百分点。研究者在 InjecAgent 和 AgentDojo 上测试了 Qwen3-8B、Llama-3.1-8B、GLM-4.5 和 Seed-OSS-36B,并发现下载量最高的 400 个对话模型中,有 33 种分词器配置未把工具协议词元纳入拆分防御。

推荐理由

固定字节对照实验把保留词元的身份效应单独拆出,显示同一段文字的攻击成功率可相差 39 到 66 个百分点,并点出分词器防御的覆盖缺口。

阅读原文techwalker.com