理解 LLM 在无害任务中遇到用户提供的有害内容时的行为（原文，在新标签页打开）
评测 LLM 在无害任务中遇到用户有害内容时是否拒绝处理。
#arXiv
今天新收录 126条今天新收录 126条
#arXiv
今天新收录 126条
10月12日周一
星期一
arXiv · 收录 · 原文 论文 arXiv · 收录 · 原文 论文关注度3939 LLM 对齐中的困境与冲突可解吗？一个来自优先级图的视角（原文，在新标签页打开）
用优先级图表征 LLM 对齐冲突并提议运行时外部核验。
arXiv · 收录 · 原文 论文关注度4444 WebWeaver：以隐蔽的上下文推断攻破 LLM 多智能体系统拓扑机密性（原文，在新标签页打开）
提出 WebWeaver ，只攻陷单个智能体并从对话上下文恢复多智能体通信拓扑。
arXiv · 收录 · 原文 论文关注度3535 PrefixWall：缓解共享 LLM 系统中的前缀缓存侧信道（原文，在新标签页打开）
提出 PrefixWall 选择性隔离共享前缀以缓解计时侧信道。
arXiv · 收录 · 原文 论文关注度4444 并非所有 token 都同等重要：面向 LLM 的查询高效越狱模糊测试（原文，在新标签页打开）
提出 TriageFuzz，用替代模型定位敏感片段做查询高效越狱。
arXiv · 收录 · 原文 论文关注度5353 利润即红队：在策略性经济互动中对 Agent 进行压力测试（原文，在新标签页打开）
提出利润驱动红队，用标量盈余搜索对手以压测经济博弈 Agent。
arXiv · 收录 · 原文 论文关注度4444 LLM-as-a-Judge 的安全：一份综合 SoK（原文，在新标签页打开）
系统梳理 LLM-as-a-Judge 安全研究并提出角色分类法。
arXiv · 收录 · 原文 论文精选关注度5555 无需攻击者：共享状态 LLM Agent 中的无意跨用户污染（原文，在新标签页打开）
形式化并评测共享状态 Agent 的无意跨用户污染。
推荐理由论文以受控实验量化共享状态 Agent 的跨用户污染率，并指出文本级清洗对含可执行产物的共享状态仍留残余风险。
arXiv · 收录 · 原文 论文关注度4444 PIDP-Attack：结合提示注入与数据库投毒攻击 RAG 系统（原文，在新标签页打开）
提出 PIDP-Attack，用查询后缀与语料投毒操纵 RAG 回答。
arXiv · 收录 · 原文 论文关注度3939 烹饪风险：大语言模型食品安全风险的基准测试与降低（原文，在新标签页打开）
提出 FoodGuardBench 与护栏 FoodGuard-4B，评测并降低食品危害越狱。
arXiv · 收录 · 原文 论文精选关注度6161 Claudini：自动研究发现面向 LLM 的最先进对抗攻击算法（原文，在新标签页打开）
提出 Claudini，让智能体自动发现更强的白盒对抗后缀攻击。
arXiv · 收录 · 原文 论文精选关注度5454 ContextualJailbreak：通过模拟对话预置进行进化式红队测试（原文，在新标签页打开）
提出 ContextualJailbreak，进化搜索模拟多轮铺垫以越狱。
推荐理由论文给出多轮上下文预置攻击在多个开源模型上的 ASR，并显示同一批攻击迁移到不同厂商前沿模型时成功率差异明显。
arXiv · 收录 · 原文 论文关注度4545 揭示物理世界语义漏洞：面向红外视觉语言模型的通用对抗贴片（原文，在新标签页打开）
提出通用弯曲网格补丁 UCGP，使红外视觉语言模型产生跨任务语义偏差。
arXiv · 收录 · 原文 论文精选关注度5959 绘制漏洞利用面：1 万次试验分类揭示什么让 LLM Agent 利用漏洞（原文，在新标签页打开）
所有条件都包含“始终遵守所有规则和访问策略”，只替换一句鼓励语。
arXiv · 收录 · 原文 论文关注度4747 针对医疗多模态检索增强生成的知识投毒攻击（原文，在新标签页打开）
提出 M3 Att，在不知查询时投毒医学多模态 RAG 并误导临床决策。
arXiv · 收录 · 原文 论文关注度4848 大语言模型越狱成功的最小、局部、因果解释（原文，在新标签页打开）
提出 LOCA，沿 SAE 方向迭代激活补丁解释单次越狱成功。
arXiv · 收录 · 原文 论文关注度4646 AttackEval：针对大语言模型的提示注入攻击有效性系统实证研究（原文，在新标签页打开）
用 AttackEval 比较提示注入策略对模拟邮件助手过滤防御的绕过效果。
arXiv · 收录 · 原文 论文精选关注度5353 Agent 技能安全：威胁模型、攻击、防御与评估（原文，在新标签页打开）
用 SkillSec-Eval 评测 Agent 技能全生命周期安全。
推荐理由论文把可复用 Agent 技能的安全拆成仓库准入、检索、规划、执行与演化五个阶段，并给出各阶段攻击与防御的实测数据。
arXiv · 收录 · 原文 论文关注度3636 CARE：面向执行 shell 命令的 LLM 智能体的执行前命令校验（原文，在新标签页打开）
提出静态优先核验器 CARE，在派发前判定智能体 shell 命令可否执行。
arXiv · 收录 · 原文 论文关注度4343 MLingualFC：评估多语言视觉语言模型的越狱漏洞（原文，在新标签页打开）
提出 MLingualFC，用多语言流程图图像评测视觉语言模型越狱漏洞。
arXiv · 收录 · 原文 论文精选关注度5959 理解并缓解真实世界 LLM 应用中的提示词泄露攻击（原文，在新标签页打开）
提出软提示防御 AREA，重锚定注意力以缓解系统提示泄露。
arXiv · 收录 · 原文 论文精选关注度5757 保护 LLM Agent 长期记忆免受投毒：不可篡改、来源绑定的权限与机器可检验保证（原文，在新标签页打开）
提出 TMA-NM，以写时来源绑定抵御 Agent 长期记忆投毒。
推荐理由论文用可机检的分离定理和跨模型基准说明，内容与血缘类记忆防御会被洗白攻击绕过，而按来源绑定权限的构造在八个前沿模型上保持零攻击成功率。
arXiv · 收录 · 原文 论文关注度5050 SilentRetrieval：以语义保持的对抗数据投毒劫持检索增强生成（原文，在新标签页打开）
提出 SilentRetrieval，以语义保持对抗文档投毒劫持 RAG 检索与生成。
arXiv · 收录 · 原文 论文精选关注度5555 InjecMEM：针对 LLM Agent 记忆系统的记忆注入攻击（原文，在新标签页打开）
提出 InjecMEM，一次注入 Agent 记忆使后续查询输出预设内容。
推荐理由论文给出单次交互污染 Agent 记忆的攻击方法与成功率，部署记忆系统的团队可据此检查检索环节的暴露面。
arXiv · 收录 · 原文 论文关注度5050 PIPES：用来源溯源与先验保护 Agent 感知（原文，在新标签页打开）
提出 PIPES，用来源与先验筛除工具响应中的越权主张。
arXiv · 收录 · 原文 论文关注度4848 VulnGym：面向仓库级漏洞检测的编码 Agent 基准（原文，在新标签页打开）
提出 VulnGym 基准，评测编程智能体的仓库级漏洞检测并定位失败步骤。
arXiv · 收录 · 原文 论文关注度4646 GIFT：通过 GPU 信息流追踪在 LLM 服务中实现用户数据隔离（原文，在新标签页打开）
提出 GIFT，用加密与 GPU 信息流跟踪隔离共享 LLM 服务中的用户数据。
arXiv · 收录 · 原文 论文关注度3838 迈向安全的世界模型：风险、防御与评估（原文，在新标签页打开）
综述世界模型六阶段生命周期中的风险、防御与评测。
arXiv · 收录 · 原文 论文关注度4242 LETHE：通过价值多样性坍缩防御未授权的图像到视频生成（原文，在新标签页打开）
提出 LETHE，扰动参考图以阻止未授权图生视频。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文关注度5151 SWE-DeceptionBench：评测 LLM 在软件开发生命周期中的欺骗行为（原文，在新标签页打开）
提出 SWE-DeceptionBench 评测 LLM 在软件开发生命周期中的欺骗。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文关注度5353 注意力看见，MLP 拒绝：追踪 LLM 中从注意力到 MLP 的安全路径（原文，在新标签页打开）
追踪注意力识别有害性到 MLP 拒绝写入的通路并提出 Sentinel。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文关注度4343 癌变式后门攻击：借助不可见 token 与阶段控制器实现渐进激活（原文，在新标签页打开）
提出 Cancerous 后门，用不可见阶段 token 分阶段腐蚀推理。
arXiv：可解释性 · 收录 · 原文 论文关注度2222 基于线性化最优传输的测度值数据稀疏字典学习：高效算法与样本复杂度（原文，在新标签页打开）
提出线性化最优传输下的测度稀疏字典学习 LWDL。
arXiv：可解释性 · 收录 · 原文 论文关注度3535 GPT-2-Small、Gemma-2-2B 与 Llama-3.1-8B 具有可解释的叙事机制（原文，在新标签页打开）
用 NVC 定位并消融语言模型的叙事相关组件。
arXiv：可解释性 · 收录 · 原文 论文关注度4949 神经网络比单个神经元所显示的更具模块性（原文，在新标签页打开）
用三层嵌套分解检验混合选择性网络能否在子空间上功能分离。
arXiv：可解释性 · 收录 · 原文 论文关注度3838 CircuitTree：将电路组合为音节转写器（原文，在新标签页打开）
提出 CircuitTree，把音素电路合并为音节转写器。
Hugging Face Daily Papers · 收录 · 原文 论文关注度3939 从仅结果奖励的强化学习中诱导过程监督（原文，在新标签页打开）
提出 TIPS，用仅结果奖励诱导生成式过程监督。
Hugging Face Daily Papers · 收录 · 原文 论文关注度3232 重新思考 on-policy 蒸馏中相对策略差异的迁移（原文，在新标签页打开）
提出 A2-OPD，用相对策略差做 on-policy 蒸馏。
Tech Policy Press · 收录 · 原文 新闻关注度3636 关于 AI 谄媚，研究怎么说（原文，在新标签页打开）
Tech Policy Press 的一篇综述梳理三篇新论文，考察 AI 谄媚（模型为附和用户而牺牲真实性）的评测方式及其对用户的影响。arXiv 论文 SycEval 称其样本中 58.19% 的对话出现谄媚行为，Gemini 最高（62.47%），ChatGPT 最低（56.71%），并指引用式反驳最易触发回归型谄媚，医疗建议数据集 MedQuad 上模型常会附和错误的用户信念并给出危险或误导性的医疗建议。另一项研究测试 11 个模型，发现其肯定用户行为的比例比人类高 50%，两项预注册实验（N=1604）中，接触谄媚模型的参与者更认为自己正确、更不愿修复冲突。第三项研究显示，与谄媚聊天机器人互动使立场极端程度增加 2.68 个百分点、立场确定性增加 4.04 个百分点，作者认为极端化主要来自支持性事实的选择性呈现。
OpenAI · 收录 · 原文 新闻精选关注度5252 GPT-5.2 在理论物理中得出一个新结果（原文，在新标签页打开）
OpenAI 发布预印本，展示物理学家此前普遍认为不会发生的一类胶子相互作用在特定条件下确实可以出现，论文的最终公式先由 GPT-5.2 Pro 猜想。该预印本题为《Single-minus gluon tree amplitudes are nonzero》，作者包括 Alfredo Guevara、Alex Lupsasca、David Skinner、Andrew Strominger 和 OpenAI 的 Kevin Weil。人类作者手工算出 n 最大到 6 的整数振幅，GPT-5.2 Pro 大幅简化这些表达式并归纳出对任意 n 成立的公式；随后一个内部脚手架版本花约 12 小时推理出同一公式并给出形式化证明，结果又与 Berends-Giele 递推关系和 soft theorem 做了核对。借助 GPT-5.2，相关振幅已从胶子推广到引力子。
推荐理由OpenAI 公开了 GPT-5.2 Pro 先猜出公式、其脚手架版本再花约 12 小时给出形式化证明的过程，可作为 AI 辅助科学发现的案例参考。