跳到正文
原文

CodeChameleon:面向大语言模型越狱的个性化加密框架

CodeChameleon: Personalized Encryption Framework for Jailbreaking Large Language Models

arXiv· arXiv:2402.16717· Huijie Lv, Xiao Wang, Yuansen Zhang, Caishuang Huang, Shihan Dou, Junjie Ye, Tao Gui, Qi Zhang, Xuanjing Huang·本站收录· 12 天前· 原文发表攻击
AI 导读

研究者提出越狱框架 CodeChameleon,用个性化加密把查询改写成代码补全任务以绕过大语言模型的安全机制,在 GPT-4-1106 上攻击成功率达 86.6%。该框架基于一个假设,即对齐模型的安全机制由意图安全识别和响应生成两个阶段组成。为避开意图安全识别,框架让用户用个性化加密函数加密查询;为保证响应生成,指令中内嵌了解密函数,使模型能解密并执行加密后的查询。作者在 7 个大语言模型上开展实验,称取得了最优的平均攻击成功率(ASR)。

相关热点

1 个事件 · 5 条新闻提到

提到这篇论文的新闻

国防科大提出 JailExpert 越狱框架

再看 2 条
阅读原文arxiv.org