Skip to content

Some text is shown in its original language while the English translation is being prepared.

arXiv· arXiv:2601.17887· Jiahe Guo, Xiangran Guo, Yulin Hu, Zimo Long, Xingyu Sui, Xuda Zhi, Yongbo Huang, Hao He, Weixiang Zhao, Yanyan Zhao, Bing Qin·Indexed by this site · Originally publishedSelectedAttention54

当个性化使风险正当化:揭示个性化对话智能体的安全漏洞

When Personalization Legitimizes Risks: Uncovering Safety Vulnerabilities in Personalized Dialogue Agents

AI reading guide

论文提出个性化对话智能体中的意图正当化(intent legitimation)失效模式,并发布 PS-Bench 基准,用于衡量良性个人记忆如何让模型把有害请求当作合理请求。在 LDAgent、A-mem、Mem0、MemOS、MemU 五种记忆框架与 GPT-4o、GPT-4o-mini、Qwen3-235B-A22B、Qwen3-8B、DeepSeek-V3.2 上,个性化使攻击成功率相对无记忆基线上升 15.8%–243.7%,且记忆与查询语义对齐时升幅最大。作者还给出表示空间上的机制证据,并提出推理时的检测反思干预,平均降低约 27.4% 的攻击成功率。

Deep readingGenerating

Why it was selected

论文量化了良性个性化让记忆增强智能体攻击成功率上升 15.8%–243.7%,并给出可复用的检测反思式缓解方法。

Read originalarxiv.org