跳到正文
事件历史事件

Markdown技能文件可传播越狱攻击

1篇报道1个报道来源最近报道

先了解这件事

AI 综述

研究者展示经Agent Markdown技能文件传播的越狱攻击:LangChain问答Agent的系统提示词由用户提供的Markdown文件组装,用270个跨九类危害的违禁问题评测。七款开源权重模型良性提示下平均攻击成功率仅0.5%,注入技能文件后升至45%,个别模型达68.9%。

AI 根据报道生成 · 13 天前更新

走势与进展

每小时关注度

现在 36,24 小时 0%·峰值 36(11月6日 03:00)

11月7日11月8日11月9日11月10日11月11日11月12日11月13日现在 36

相关研究

后续时间线

10月27日
  1. arXiv:越狱、提示注入、投毒与防御
    被投毒的技能:越狱通过 Agent Markdown 文件传播

    研究者展示了一种通过 Agent Markdown 技能文件传播越狱的攻击,七款开源权重模型的平均攻击成功率从 0.5% 升至 45%,个别模型达 68.9%。实验构建了一个系统提示词由用户提供的 Markdown 文件组装的 LangChain 问答 Agent,载荷结合人设操纵与基于 GPTFUZZER 的攻击,并用 270 个跨九类危害的违禁问题评测。良性系统提示下模型几乎全部拒答,平均攻击成功率仅 0.5%;注入技能文件后升至 45%。两种混淆策略,基于零宽字符的隐形载荷与基于字素到音素转换的语音载荷,均未超过明文注入,语音变体反将平均成功率降到 30%。作者指出 Markdown 技能文件是尚未被充分研究的 Agent 攻击面,对配置型越狱的脆弱性更多取决于底层模型而非混淆技术。

相关讨论

本站还没有收集到这件事的讨论链接。

关注度走势

每小时关注度

当前关注度36·可比范围峰值36(11月6日 03:00)·近 24 小时可比范围变化 0%

01020304011月6日03:0011月8日11:0011月10日18:0011月13日02:00