Debate training reduces reward hacking in RLAIF(original, opens in a new tab)

Proposes constant-sum debate training to mitigate reward hacking in RLAIF under weak judges.

Fair-ASR：在共享目标调用预算下重新评测黑盒越狱攻击(original, opens in a new tab)

在共享目标调用预算下重评黑盒越狱并提出 ReCode。

PACE：为 DeFi 中的 AI Agent 提供策略认证的合约执行框架(original, opens in a new tab)

提出 PACE，用策略认证与签名决策记录拦截 DeFi 智能体违规交易。

GEO-Flag：检测与测量面向生成式引擎优化的网页内容(original, opens in a new tab)

提出 GEOFlagBench 与 IPT，检测并测量生成式引擎优化网页。

JailbreakSkill：用可复用可演化技能扩展自动化红队(original, opens in a new tab)

提出JailbreakSkill，用可演化技能自动搜索并复用越狱提示。

Why it was selected把攻击方法封装成可复用、可演化的技能库，并给出在 AdvBench 与 HarmBench 上的 ASR 提升幅度，红队工程化可参考。

CompoSkill 框架利用逐个通过扫描的 Agent 技能组合发起攻击(original, opens in a new tab)

提出 CompoSkill，将逐个通过扫描的技能编排为攻击链。

Why it was selected论文提出技能组合层面的攻击框架，说明单个技能通过扫描并不等于组合执行路径安全，可供技能市场与 Agent 运行时的安全评估参考。

MicroVerse：测量长时程多智能体语言模型模拟中自我书写身份漂移的工具(original, opens in a new tab)

MicroVerse 是一款测量生成式智能体身份漂移的行为科学工具，智能体携带不可变的"soul file"（核心价值观、道德边界、人格、目标）。

ARENA：面向大型音频语言模型的自动化红队框架(original, opens in a new tab)

提出 ARENA 音频红队框架，自动构造文本安全且音频接地的越狱输入。

The study measures reward hacking and reasoning-answer decoupling under position-confounded optimization(original, opens in a new tab)

Measuring reward hacking and reasoning-answer decoupling under position-confounded optimization.

智能体 AI 系统的认知诱发风险：从物理认知到自我指涉认知的三级框架(original, opens in a new tab)

提出三层认知框架，归纳智能体扩大认知范围带来的人本风险与缓解策略。

Tripwire：通过统计认证的安全神经元触发对齐拒答(original, opens in a new tab)

Tripwire 是一种免训练防御方法，通过逐神经元假设检验并在错误发现率控制下识别安全特异性神经元，再用效用特异性过滤器排除对模型效用重要的神经元。

AgentRewind：面向长周期 LLM Agent 的可恢复执行框架(original, opens in a new tab)

提出 AgentRewind，支持长程 Agent 回退对齐检查点并继续执行。

Vero：首个仓库级实现与证明联合合成基准，最强 Agent 仅解出 43 个实例中的 27 个(original, opens in a new tab)

研究者提出 Vero，首个在仓库层面评估实现与形式化证明联合合成的基准，用于衡量 AI Agent 能否构建经过机器校验的软件。

WIFA：按意图分组监督缓解包装式越狱与过度拒答(original, opens in a new tab)

提出 WIFA 意图组监督微调，缓解包装式越狱与过度拒答。

SPARED：用对抗编辑数据训练基于推理的 AI 生成图像检测器(original, opens in a new tab)

提出 SPARED，用对抗编辑数据训练基于推理的 AI 生成图像检测器。

The researchers propose SkillMisevo-Bench to quantify the risk of skill mis-evolution in self-improving agents.(original, opens in a new tab)

提出 SkillMisevo-Bench，量化自改进 Agent 的技能误演化。

Why it was selected论文给出技能演化中不安全产物被写入并跨会话复用的量化证据，并附开源代码，便于评估自改进 Agent 的持久化风险。

PIPES: Protecting Agent Perception with Provenance and Priors(original, opens in a new tab)

提出 PIPES，用来源与先验筛除工具响应中的越权主张。

互补 LLM 水印如何追踪来源并检测篡改(original, opens in a new tab)

提出 Cocktail 水印，共嵌稳健与脆弱信号以溯源并发现篡改。

研究者提出 Convergent Detour Hijacking 攻击，可让技能型 LLM Agent 绕路并放大资源消耗(original, opens in a new tab)

提出 CDH 攻击，让技能型 Agent 绕路放大资源消耗。

Study audits 9 vision-language models: national stance rewriting rate under Chinese prompts is about three times that under English(original, opens in a new tab)

审计视觉语言模型在敏感图像上从拒答转向国家立场重构的行为。

Harness-IF：评估编码 Agent 跨指令面的指令遵循能力(original, opens in a new tab)

提出 Harness-IF，评测编码 Agent 跨指令面的指令遵循。

SRE-Bench: A Contamination-Free Real-Scale Benchmark for Agent Reverse Engineering(original, opens in a new tab)

提出 SRE-Bench 评测智能体的真实规模二进制逆向能力。

通过采样 BPE token 统计审计中文网页规模语料库(original, opens in a new tab)

提出 SAMPLED-BPE，对中文网页语料做抽样 BPE 的 token 级污染审计。

依赖引导回滚修复：为记忆增强 Agent 恢复错误记忆后的答案与状态(original, opens in a new tab)

提出依赖引导回滚修复，恢复记忆增强 Agent 的回答与状态。

DURA：用扩散模型生成自然对抗补丁攻击 VLA 机器人模型(original, opens in a new tab)

提出 DURA，用扩散模型生成自然对抗补丁操控 VLA 机器人动作。

研究者用进化算法构造多智能体 LLM 系统中的自我传播“思维病毒”(original, opens in a new tab)

用演化算法构造 mind virus 并测量其在多智能体中的传播。

SHE：面向 LLM Agent 的轨迹驱动安全护栏演化框架(original, opens in a new tab)

研究者提出 Safety Harness Evolution（SHE），一个从 rollout 轨迹中学习演化安全边界的框架，用于提升 LLM Agent 的安全性。

Researchers steal proprietary LLM inference chains via cross-model compatibility of encrypted inference blocks(original, opens in a new tab)

利用加密思维块的跨模型重放，诱导弱模型逐字转写专有推理链。

Why it was selected论文披露加密推理块可跨会话、跨用户、跨模型复用，并给出对 Anthropic、OpenAI、Google 三家 API 的实测结果与缓解建议。

ColluSkill 用跨技能组合绕过 Agent 技能扫描器，平均攻击成功率 96.0%(original, opens in a new tab)

提出 ColluSkill，用跨技能组合绕过 Agent 技能扫描器。

Why it was selected论文同时给出跨技能组合攻击在六款扫描器上的成功率和链级防御的拦截效果，可对照现有技能扫描流程评估盲区。

ElasticBack：通过触发词与规则耦合在 LLM Agent 技能中植入条件后门(original, opens in a new tab)

提出 ElasticBack，在单个 Agent 技能中植入条件后门。

Import AI 468: 23 RSI policy recommendations, PostTrainBench+, and trust and transparency in the AI race(original, opens in a new tab)

Import AI issue 468 includes 23 "low-regret" policy recommendations from think tank IFP, across 7 categories, to help policymakers address risks from automated AI R&D, including increasing transparency of automated AI R&D, accelerating AI verification technology, and investing in AI resilience.

ActBench: A Self-Evolving Benchmark for Behavioral Safety of Collaborative Agents(original, opens in a new tab)

香港城市大学、浙江大学、伦敦大学学院与小米的研究者构建自演化基准 ActBench，评测协作智能体的行为安全。

Why it was selected该基准用配对良性任务与对抗变体，从执行轨迹而非最终回复判定行为安全，并给出跨模型与跨框架的攻击成功率对比。

Research reveals how rhetoric performs reward hacking against AI reviewers(original, opens in a new tab)

Measuring how content-preserving rhetorical rewrites change AI review scores.

SkillSafe-Bench：技能合并模型静态安全无法预测自适应越狱鲁棒性(original, opens in a new tab)

提出 SkillSafe-Bench，评测技能合并模型的自适应越狱鲁棒性。

Why it was selected论文用受控网格对比静态拒答与自适应攻击下的表现，为评估模型合并后的安全风险提供了可复现的基准设计。

论文提出提示注入的七组件结构化分析模型(original, opens in a new tab)

提出按意图标注提示注入的结构化组件模型。

研究者提出 SN-Guided Diffusion，利用扩散大模型安全神经元实现离线越狱(original, opens in a new tab)

提出 SN-Guided Diffusion，利用安全神经元实现离线越狱。

Why it was selected论文给出扩散大模型安全神经元可跨架构迁移的证据与攻击成功率，为评估扩散架构对齐脆弱性提供可复现方法。

A²E：面向 Agent harness 的端到端审计评测引擎(original, opens in a new tab)

提出 A2E 引擎，用 ATP 端到端评测异构 Agent harness。

SynChain：诱导计算机使用 Agent 自建攻击链并跨任务持久化(original, opens in a new tab)

提出 SYNCHAIN，诱导计算机使用 Agent 自建跨任务持久攻击链。

Why it was selected论文提出让被污染模型在正常流程中自造带毒技能并跨任务复活的攻击链，并给出三种 Agent 框架下的成功率与防御失效情况。

研究用因果审计揭示多模态模型视觉工具调用的假象(original, opens in a new tab)

因果审计视觉工具调用，分离观察贡献与动作诱发捷径。

AMS 工具通过激活分析检测语言模型的安全训练改动(original, opens in a new tab)

提出 AMS，用激活分离与方向相似度检测安全训练改动。