SWE-Critix: Post-trained general-purpose verifier for evaluating coding agent trajectories(original, opens in a new tab)
论文提出 SWE-Critix,一套用于训练编码 Agent 轨迹通用验证器的后训练流程。给定任务及其执行轨迹,训练出的验证器会预测完成标签,并生成解释其判断的自然语言分析。
Some text is shown in its original language while the English translation is being prepared.
论文提出 SWE-Critix,一套用于训练编码 Agent 轨迹通用验证器的后训练流程。给定任务及其执行轨迹,训练出的验证器会预测完成标签,并生成解释其判断的自然语言分析。
论文提出以组织行为学(OB)作为研究先进 Agent 安全的框架,并首次将反生产工作行为(CWB)系统形式化为 Agentic Counterproductive Behavior(ACB)。
研究者提出免训练的记忆修复框架 DREAM,用于修复被投毒的 LLM Agent 记忆,同时保持良性任务效用。
论文发布 LLMail-Inject。数据集评估完整攻击链,攻击需先被邮件数据库检索到、绕过所部署的防御,再触发参数正确的越权工具调用。
研究者提出一套两阶段流程。
Why it was selected论文给出了从四款生产级 LLM 中提取受版权书籍的具体流程与成功率,可用于评估记忆化与输出防护的实际强度。
论文提出用结构化 tokenization 编码 Agent 的执行流模式(工具调用、参数、观察结果)而非对话内容,以提升攻击检测的跨攻击泛化能力。
研究团队提出中文特有安全基准 CSSBench,用于评估轻量级 LLM 在中文对抗模式下的安全性。
论文提出一种认知合谋攻击,多个智能体仅用真实信息碎片在公开渠道协同发布,诱导受害者智能体形成虚假信念。
研究者提出无需梯度和人工先验的越狱优化框架 RAILS,仅利用模型 logits 做 token 级迭代局部搜索。
Why it was selected论文给出无需梯度与人工先验的越狱优化方法,并在开源与闭源模型上报告攻击成功率与迁移数据,可供红队方法对照。
论文提出 Mastermind,一个面向大语言模型的多轮越狱框架,通过规划、执行与反思的闭环自主积累并复用攻击模式。
研究者提出 StealthGraph 框架,用知识图谱引导生成领域相关有害提示词,再通过直接改写与上下文增强改写两种策略,把显式有害提示词转成隐式变体。
评测显示 GPT-OSS-20B、Qwen3-Next-80B-A3B-Thinking 和 GPT-OSS-120B 为最安全的三个模型,Seed-OSS、DeepSeek-R1 蒸馏和 Mistral 家族最易受攻击。
论文系统评估了基于记忆的 LLM 智能体在电子健康记录(EHR)场景下的记忆投毒攻击与防御。
研究者系统评测了临床 LLM 中基于人设的控制,发现医学人设的效果随场景变化且非单调。
论文提出 MiJaBench。
论文对基于点云的 3D 视觉语言模型(如 PointLLM、GPT4Point)的对抗鲁棒性展开研究,作者称这是该方向首个系统性研究。
研究测试了越狱版 GPT-4o、标准 GPT-4o。
Why it was selected四项实验覆盖多款前沿模型,量化了模型说服人相信阴谋论的效果,并对比了真实性约束与不同模型护栏的差异。
论文系统评估了 KGW、Exponential Sampling(EXP)和 Waterfall 三种文本水印方法在孟加拉语大语言模型文本生成中的鲁棒性,并针对跨语言往返翻译(RTT)攻击提出分层水印策略,作者称这是该场景下的首次系统评估。
研究团队发布 RedBench。
论文提出 SEAgent,一个基于属性访问控制(ABAC)的强制访问控制框架,用于阻止 LLM Agent 系统中的权限提升。
论文提出 BenchOverflow,一个用九种纯文本提示策略测量大语言模型输出膨胀(Overflow)的模型无关基准。
研究者对三种安全代码生成方法 SVEN、SafeCoder、PromSec 做了系统性对抗审计,发现它们在对抗提示下并不稳健。
研究者发现大语言模型存在表情符号语义混淆漏洞,模型会误读 ASCII 表情符号,执行非预期甚至破坏性的操作。
论文构建了 MedCounterFact 反事实医学问答数据集,并评测多个前沿 LLM,发现模型面对反事实证据时普遍照单全收,给出自信且不加保留的回答。
STaR 是面向大推理模型的免参数推理时遗忘框架,可在整条思维链上去除敏感内容,而非只改写最终答案。
研究者提出 ChartAttack 框架,用于评估多模态大语言模型(MLLM)在图表生成中受恶意提示影响的程度。
论文在六个主流 LLM 和三个领域上评估了模型在多轮对话中受说服影响的信念稳定性。
论文提出 AdversaRiskQA,称其为首个经核验的对抗事实性基准,覆盖医疗、金融、法律三个高风险领域,用于测试模型识别并抵抗被自信表述的虚假信息的能力。
一篇 arXiv 论文系统研究了提示词框架对 LLM 评委判断的影响。研究借鉴心理学的框架效应,用谓词肯定与谓词否定构造对称提示词,在四类高利害评测任务上测试,发现框架会显著改变模型输出。
NeuroFilter 提出基于激活探针的隐私过滤器,用于 LLM 智能体推理时的信息泄露防护。
The paper proposes TrojanPraise, a method to jailbreak LLMs by fine-tuning on benign, review-passable data, while bypassing review models such as Llama-Guard-3.
Why it was selectedThe paper presents a benign fine-tuning jailbreak method that bypasses data review and explains its cause using the two representation dimensions of knowledge and attitude, which can help fine-tuning service providers assess filtering blind spots.
VILTA 将 VLM 直接纳入自动驾驶智能体的闭环训练,通过细粒度编辑周边智能体的未来轨迹来生成挑战性场景。
论文研究了基于 nugget 的 RAG 系统在使用 LLM judge 评测时的循环性风险,作者通过刻意修改 Crucible 使其生成针对 LLM judge 优化的输出,发现当提示模板或 gold nuggets 等评测要素被泄露或可被预测时,系统可获得接近满分的评测分数。
论文提出选项注入(option injection)评测方法并构建 OI-Bench 基准,用于评估大语言模型对指令干扰的易感性。
研究团队提出 SycoEval-EM 多智能体模拟框架,用于评估大语言模型在急诊场景中面对患者说服时是否偏离循证指南。
研究者提出 MalURLBench,一个评估 LLM 处理恶意 URL 时脆弱性的基准,作者称这是首个针对该威胁的基准。
论文提出 GOSV 框架,通过全局优化同时识别大语言模型中安全相关的注意力头,并据此构造推理时白盒越狱方法。
研究者提出 HASTE(Hard-negative Attack Sample Training Engine)框架,通过迭代生成高规避性提示词,持续加固针对提示攻击的 LLM 防御与护栏。
研究者提出 AttenMIA,一种利用 Transformer 自注意力模式判断样本是否属于训练集的成员推断攻击框架。
The paper proposes ten categories of hidden intents based on social science and evaluates their detectability through a controlled testbed.
Why it was selectedThe paper uses a controlled testbed to quantify the precision collapse of hidden intent detection at low prevalence, providing an empirical reference for the capability boundaries of auditing methods.