多模态大语言模型的多轮越狱攻击与 FragGuard 防御（原文，在新标签页打开）
提出多轮多模态越狱，并用 FragGuard 拦截有害响应。
#arXiv
今天新收录 126条今天新收录 126条
#arXiv
今天新收录 126条
10月9日周五
星期五
论文追踪 · 收录 · 原文 论文 论文追踪 · 收录 · 原文 论文关注度3636 研究提出基于学习的自动化对抗红队框架，用于大语言模型鲁棒性评测（原文，在新标签页打开）
提出约束对抗搜索红队框架，系统发现模型多类鲁棒性漏洞。
论文追踪 · 收录 · 原文 论文精选关注度5353 MultiTurnPSB：四轮医疗越狱评测显示单轮基准掩盖 19 倍安全差距（原文，在新标签页打开）
构建 MultiTurnPSB，评测四轮医疗越狱与分类器输入防御。
推荐理由论文用四轮对话基准揭示单轮评测看不到的模型安全差距，并给出分类器干预与假阳性代价的量化结果。
论文追踪 · 收录 · 原文 论文精选关注度6464 论文提出自适应攻击框架，击穿 12 项 LLM 越狱与提示注入防御（原文，在新标签页打开）
提出自适应攻击框架，击穿越狱与提示注入防御。
论文追踪 · 收录 · 原文 论文精选关注度5454 研究复现五个前沿模型的包名幻觉：跨模型共同幻觉 127 个包名，53 个仍可被注册（原文，在新标签页打开）
复评前沿模型代码生成中的包名幻觉与抢注攻击面。
推荐理由论文在五个前沿模型上复现包名幻觉测量，并给出跨模型共同幻觉的包名集合与仍可注册的子集，可供评估 slopsquatting 攻击面。
论文追踪 · 收录 · 原文 论文关注度4646 RedDiffuser：用强化扩散生成视觉输入审计 VLM 多模态安全失效（原文，在新标签页打开）
提出 RedDiff，用强化扩散生成图像审计 VLM 情境安全失效。
论文追踪 · 收录 · 原文 论文关注度5050 VideoSTF 揭示视频大模型输出重复问题，时序扰动攻击成功率最高 98%（原文，在新标签页打开）
提出 VIDEO STF 评测视频大模型输出重复并压力测试时序扰动。
论文追踪 · 收录 · 原文 论文精选关注度5757 RL-Hammer：用 GRPO 从头训练攻击模型，对带防御的 GPT-5 达 72% 攻击成功率（原文，在新标签页打开）
Meta FAIR 与马里兰大学研究者提出 RL-Hammer，从零训练攻击模型经工具输出实施提示注入。
论文追踪 · 收录 · 原文 论文关注度5050 研究者提出 MM-Plan 多模态越狱框架，对 Claude 4.5 Sonnet 攻击成功率达 46.3%（原文，在新标签页打开）
提出 MM-Plan 多模态越狱框架，自动规划多轮图像编辑以越狱视觉独占目标。
论文追踪 · 收录 · 原文 论文关注度4747 ContextLeak：审计私有上下文学习方法的隐私泄露（原文，在新标签页打开）
提出 ContextLeak，用金丝雀成员推断审计私有 ICL 泄漏。
论文追踪 · 收录 · 原文 论文关注度5050 研究者提出 TIP：用树结构搜索为 MCP 生成隐蔽注入载荷（原文，在新标签页打开）
提出 TIP，用树搜索为 MCP 响应生成隐蔽注入载荷。
论文追踪 · 收录 · 原文 论文精选关注度5959 STAC：看似无害的工具调用链如何攻破 LLM Agent（原文，在新标签页打开）
AWS AI Labs 研究者提出 STAC 框架，把恶意目标拆成多轮看似无害的工具调用链。
论文追踪 · 收录 · 原文 论文关注度4848 研究揭示修辞如何对 AI 审稿人实施奖励作弊（原文，在新标签页打开）
测量内容保留的修辞改写如何改变 AI 审稿分数。
论文追踪 · 收录 · 原文 论文关注度4848 论文建模多智能体网络中的子智能体继承攻击面（原文，在新标签页打开）
建模并利用多智能体网络中子智能体生成时的记忆继承漏洞。
论文追踪 · 收录 · 原文 论文精选关注度5757 MOSAIC 框架利用 CLI 命令组合攻击编码 Agent，成功率 96.59%（原文，在新标签页打开）
中山大学、山东大学、北京大学与香港科技大学的研究者提出 MOSAIC，用 CLI 安全知识库构造编码 Agent 的命令组合攻击。
推荐理由论文提出 CLI 命令组合风险，用 CVE 与 PoC 蒸馏知识库生成攻击链，在五款编码 Agent 上给出成功率并测试五类防御。
论文追踪 · 收录 · 原文 论文关注度4040 论文提出 LPCI：针对 Agent 逻辑层与持久记忆的提示控制注入攻击（原文，在新标签页打开）
提出 LPCI，把延迟条件载荷写入记忆与检索库以跨会话触发。
论文追踪 · 收录 · 原文 论文精选关注度5959 ASPI 基准：Agent 寻求澄清时提示注入攻击成功率大幅上升（原文，在新标签页打开）
构建 ASPI 基准，评测 Agent 寻求澄清时的提示注入脆弱性。
推荐理由论文用配对实验隔离出澄清状态这一新攻击面，并给出十款模型的攻击成功率变化，可供部署交互式 Agent 的团队重新评估评测口径。
论文追踪 · 收录 · 原文 论文精选关注度5858 MobiRed 框架测评八款移动 LLM Agent 的第三方渠道提示注入攻击（原文，在新标签页打开）
用 MobiRed 评测移动 LLM Agent 面对第三方渠道的提示注入。
论文追踪 · 收录 · 原文 论文关注度4646 研究：LLM 在多智能体系统中更易被同伴共识误导而非纠正（原文，在新标签页打开）
比较多智能体同伴共识下有害修订与有益修订的强弱。
论文追踪 · 收录 · 原文 论文精选关注度5757 DREAM 框架用跨环境长链攻击评测 12 个 LLM Agent，逾 68% 攻击绕过现有防御（原文，在新标签页打开）
南京大学、香港大学等机构的研究者提出 DREAM 框架，评测 Agent 的跨环境长链攻击脆弱性。
Hugging Face Daily Papers · 收录 · 原文 论文关注度1414 《大语言模型基础》一书发布，覆盖预训练、对齐与推理六大主题（原文，在新标签页打开）
讲解自监督预训练得到基础模型及对齐与推理。
arXiv · 收录 · 原文 论文关注度3636 论文提出用语言模型充当 AI 研究世界模型，预测实验结果（原文，在新标签页打开）
提出研究世界模型，用语言模型预测干预增益。
arXiv · 收录 · 原文 论文关注度3939 LGWM：用动作条件世界模型验证 GUI 智能体的屏幕转移（原文，在新标签页打开）
提出 LGWM，用动作条件世界模型核验 GUI 智能体屏幕转移。
arXiv · 收录 · 原文 论文精选关注度5858 复旦团队测量 AI 搜索引用脆弱性：普通发帖可进入引用与答案文本（原文，在新标签页打开）
复旦大学等机构的研究者测量 AI 搜索引用脆弱性，证明普通公开发帖可进入引用与回答。
arXiv · 收录 · 原文 论文精选关注度5858 TestJack 审计编码基准：34.4% 通过样本违反任务要求（原文，在新标签页打开）
哥伦比亚大学、UC Berkeley 等机构的研究者提出 TESTJACK，动态审计编码基准通过判定是否满足任务要求。
推荐理由论文给出编码 Agent 基准中约三分之一通过样本实际违反任务要求的量化结果，并对比静态测试增强方法的召回差距。
arXiv · 收录 · 原文 论文精选关注度6060 PyCache Trap 利用 Python 缓存替换绕过七款 Agent Skill 扫描器，攻击成功率 94–100%（原文，在新标签页打开）
提出 PyCache Trap，用字节码缓存替换绕过 Agent 技能扫描器。
推荐理由论文给出缓存替换在七款 Skill 扫描器上的攻击成功率，并附可复现的防御实现，适合做 Skill 准入的团队参考。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文精选关注度5858 论文复盘 OpenAI、Anthropic 与 Google Agent 安全事件并提出 PASAC 框架（原文，在新标签页打开）
提出 PASAC 与五层边界保证栈，把智能体评测越界变成可验证的全系统保证。
推荐理由论文把三家实验室的 Agent 越界事件并置比较，区分自适应逃逸与配置失误两类路径，并提出可检验的边界保障框架。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文关注度5050 研究提出 AI Agent 种群生态理论：协作带来起飞临界规模（原文，在新标签页打开）
为失配智能体种群建立生态模型，说明协作产生起飞临界规模。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文精选关注度5555 研究：法律推理模型引用法条不等于依据法条，注入指令合规率高达 73.3%–96.4%（原文，在新标签页打开）
用依据置换与隐层追踪审计法律思维链是否真正依赖所引法条。
推荐理由论文用反事实替换法律依据并解码隐藏状态，量化了模型引用权威与实际依赖权威之间的落差，为思维链忠实性审计提供了可迁移方法。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文精选关注度6060 论文提出选项通道攻击：改一个选项标签即可让 Agent 护栏放行违规操作（原文，在新标签页打开）
提出选项通道攻击，重命名选项标签使 Agent 护栏放行违规操作。
推荐理由论文把护栏的放行与误拦分开统计，并给出选项标签这一被忽视的攻击面，部署 Agent 网关的团队可据此检查调用库是否把标签送入模型。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文关注度5252 研究提出 Agent 安全新维度：识别未履行的安全义务（原文，在新标签页打开）
提出义务识别基准 ObligationBench，并训练护栏识别 Agent 未履行的安全义务。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文精选关注度5757 EpiReal-Bench：商用图像生成模型虚假声明红队基准，直接提示攻击成功率超 70%（原文，在新标签页打开）
构建 EpiReal-Bench，评测图像生成器将虚假主张渲染为可信证据。
推荐理由论文给出四款商用图像生成模型在虚假声明提示下的攻击成功率，并公开了基准与攻击框架，可对照检查自家模型的生成侧护栏。
arXiv：越狱、提示注入、投毒与防御 · 收录 · 原文 论文关注度4545 研究：叙事包装可跨语言绕过 LLM 拒答，Qwen3-1.7B 上古文攻击成功率达 95.7%（原文，在新标签页打开）
提出 GUISE 基准与 AXIS 训练，防御叙事包装越狱。
Hugging Face Daily Papers · 收录 · 原文 论文关注度4343 论文提出 ISE 框架，评测 LLM Agent 在知识冲突下的认知谦逊（原文，在新标签页打开）
提出 ISE 框架，评测 LLM Agent 在知识冲突下的认知谦逊。
arXiv：可解释性 · 收录 · 原文 论文关注度4646 FearCaut-Qwen：激活引导改变视觉语言模型的风险判定标准（原文，在新标签页打开）
用恐惧激活转向检验视觉语言模型的隐患判定准则。
arXiv：可解释性 · 收录 · 原文 论文关注度4040 RouterInterp：解释 MoE 路由中的叠加特化现象（原文，在新标签页打开）
提出 RouterInterp，用 SAE 解释 MoE 路由的叠加特化。
arXiv：可解释性 · 收录 · 原文 论文关注度2828 用路由稀疏自编码器解耦语音编码器中的语言学与副语言学信息（原文，在新标签页打开）
提出路由 TopK SAE，把语音编码器稀疏码拆成语言与副语言通路。
arXiv：可解释性 · 收录 · 原文 论文关注度3434 Nullify：面向 LLM 遗忘的零空间激活引导免训练方法（原文，在新标签页打开）
提出零空间激活引导 Nullify，免训练擦除指定记忆并保持效用。
arXiv：危险能力与安全评测 · 收录 · 原文 论文关注度5050 研究者对 HELM Safety 与 HarmBench 做心理测量学审查，质疑其分数能否代表单一属性（原文，在新标签页打开）
审计 HarmBench 分数能否代表单一 harmful refusal 属性。
arXiv：危险能力与安全评测 · 收录 · 原文 论文关注度4141 ReSI：面向抗攻击与抗未知风险的递归安全改进框架（原文，在新标签页打开）
提出 ReSI，用自动红队与配方搜索递归改进模型安全对齐。