Some text is shown in its original language while the English translation is being prepared.
arXiv· arXiv:2601.17887· Jiahe Guo, Xiangran Guo, Yulin Hu, Zimo Long, Xingyu Sui, Xuda Zhi, Yongbo Huang, Hao He, Weixiang Zhao, Yanyan Zhao, Bing Qin·Indexed by this site · Originally publishedSelectedAttention54 当个性化使风险正当化:揭示个性化对话智能体的安全漏洞
When Personalization Legitimizes Risks: Uncovering Safety Vulnerabilities in Personalized Dialogue Agents
AI reading guide
论文提出个性化对话智能体中的意图正当化(intent legitimation)失效模式,并发布 PS-Bench 基准,用于衡量良性个人记忆如何让模型把有害请求当作合理请求。在 LDAgent、A-mem、Mem0、MemOS、MemU 五种记忆框架与 GPT-4o、GPT-4o-mini、Qwen3-235B-A22B、Qwen3-8B、DeepSeek-V3.2 上,个性化使攻击成功率相对无记忆基线上升 15.8%–243.7%,且记忆与查询语义对齐时升幅最大。作者还给出表示空间上的机制证据,并提出推理时的检测反思干预,平均降低约 27.4% 的攻击成功率。
Deep readingGenerating
Why it was selected
论文量化了良性个性化让记忆增强智能体攻击成功率上升 15.8%–243.7%,并给出可复用的检测反思式缓解方法。
Read originalarxiv.org