论文：基于 RL 的对齐最多只能保证有条件合规(original, opens in a new tab)
这篇预印本论文提出，基于强化学习的对齐把规范与任务追求压进同一个策略，因此最多只能保证有条件合规。
Translation in progress Some entries still include text in the original language.
#arXiv
No new updates indexed today yetNo new updates indexed today yet
#arXiv
No new updates indexed today yet
Page 22 Newer contentBack to latest
Sep 7Mon
Monday
arXiv：危险能力与安全评测 · Indexed · Original Paper arXiv：Agent 与 MCP 安全 · Indexed · Original PaperSelectedAttention5353 CoER：用对抗协同演化与精炼防御自适应间接提示注入(original, opens in a new tab)
提出 CoER，用对抗共进化与精炼训练工具智能体抵御自适应间接提示注入。
Why it was selected论文把工具智能体的自适应间接提示注入建模为多轮博弈，用攻防协同演化加教师示范微调，给出跨七个域的攻防成功率与安全任务完成率对比。
arXiv：越狱、提示注入、投毒与防御 · Indexed · Original PaperAttention4646 DIVA：利用视觉锚点对视频生成模型实施多模态越狱(original, opens in a new tab)
提出 DIVA，将有害意图拆成视觉锚点与运动文本以越狱视频生成模型。
arXiv：危险能力与安全评测 · Indexed · Original PaperAttention5050 论文：LLM 安全监控的监督缺口并非能力问题(original, opens in a new tab)
刻画单迹监控对跨执行超性质的监督缺口。
arXiv：后门、投毒与隐私 · Indexed · Original PaperAttention2626 FDBA：联邦学习中的细粒度分布式后门攻击(original, opens in a new tab)
提出联邦学习细粒度分布式后门框架 FDBA，用动态触发与对比嵌入降低投毒比例。
arXiv：后门、投毒与隐私 · Indexed · Original PaperAttention2222 VERITAS：抗投毒的本地差分隐私图学习协议(original, opens in a new tab)
提出 VERITAS，用双边背书剪除本地隐私图学习中的投毒节点。
arXiv：可解释性 · Indexed · Original PaperAttention1919 PhysSAE：用稀疏自编码器对 PINN 做机制可解释性分析(original, opens in a new tab)
提出 PhysSAE，用稀疏自编码器分析 PINN 隐藏层的物理概念。
arXiv · Indexed · Original PaperSelectedAttention5555 TrojanWorld：通过想象引导对世界模型智能体植入后门(original, opens in a new tab)
提出 TrojanWorld，用物理触发器对世界模型智能体植入想象引导后门。
Why it was selected论文把后门植入世界模型而非策略层，用物理物体触发并让恶意行为在触发物消失后延续，为具身智能体的供应链安全提供了新的攻击面参考。
arXiv：后门、投毒与隐私 · Indexed · Original PaperAttention4343 FreqDoor：面向视觉语言模型的频域后门攻击(original, opens in a new tab)
提出 FreqDoor，在频域混合振幅并对生成式 VLM 做训练时视觉后门。
arXiv：危险能力与安全评测 · Indexed · Original PaperAttention4646 AV-SafetyBench：面向文本到音视频生成的安全基准(original, opens in a new tab)
提出 AV-SafetyBench 评测文生音视频模型的不安全生成。
arXiv：Agent 与 MCP 安全 · Indexed · Original PaperAttention4646 AgentDrift：逐步标注注入劫持 LLM Agent 轨迹的基准(original, opens in a new tab)
作者发布 AgentDrift，覆盖五个 Agent 领域。
arXiv：可解释性 · Indexed · Original PaperAttention88 通过稀疏自编码器特征追踪查询扩展效果(original, opens in a new tab)
用 SAE 追踪稠密检索查询扩展的潜变量并用激活转向验证。
arXiv：越狱、提示注入、投毒与防御 · Indexed · Original PaperSelectedAttention5656 Mole：面向前沿实验室 AI 智能体的内部威胁检测基准(original, opens in a new tab)
卡内基梅隆大学研究者提出 MOLE 基准，评测监控器对 AI 智能体内部威胁的检出能力。
arXiv：越狱、提示注入、投毒与防御 · Indexed · Original PaperSelectedAttention5656 论文提出拒答的几何解释：事后安全训练脆弱，预训练期持续安全共训更抗攻击(original, opens in a new tab)
解释后验安全的权重几何脆弱性，并提出预训练持续安全共训练。
Why it was selected论文用几何视角解释事后安全训练为何容易被少量良性微调抹掉，并实测在整个预训练中持续加入安全共训练能让拒答经受住同样的攻击。
arXiv：危险能力与安全评测 · Indexed · Original PaperAttention5050 AURA-Eval：评估 LLM Agent 工具调用轨迹中的风险意识行为(original, opens in a new tab)
提出 AURA-Eval，评测 Agent 工具轨迹中的风险意识与行动选择。
arXiv：对齐、欺骗与监督 · Indexed · Original PaperAttention4343 PMA attack: a semantic manifold alignment method against embedding-to-embedding obfuscation in privacy-preserving LLMs(original, opens in a new tab)
Proposes PMA, which recovers plaintext from E2EO-obfuscated vectors using manifold alignment.
Sep 6Sun
Sunday
arXiv：对齐、欺骗与监督 · Indexed · Original PaperSelectedAttention5555 Inducing emergent misalignment from reward hacking with iterative DPO(original, opens in a new tab)
Using iterative DPO to induce emergent misalignment from reward hacking.
Why it was selectedThe paper uses iterative DPO to replace expensive online RL in reproducing emergent misalignment caused by reward hacking, and provides a reusable low-cost training pipeline and a selective generalization testbed.
arXiv：越狱、提示注入、投毒与防御 · Indexed · Original PaperAttention3636 研究提出 AI 安全评测的威胁模型覆盖缺口(original, opens in a new tab)
论证红队评测存在威胁模型覆盖缺口并用多语言探针验证。
arXiv：对齐、欺骗与监督 · Indexed · Original PaperAttention66 TryOnReward：面向虚拟试衣强化微调的注视一致性奖励模型(original, opens in a new tab)
TryOnReward 是面向虚拟试衣（VTON）的细粒度奖励模型，基于视觉语言骨干，采用注视校准目标将各质量维度锚定到相关区域，避免全局捷径学习，并通过 margin-aware 监督联合优化成对偏好与逐维度质量分。
arXiv：后门、投毒与隐私 · Indexed · Original PaperAttention2929 面向后门攻击下持续学习的鲁棒动态扩展：净化与选择性恢复(original, opens in a new tab)
提出持续学习下的净化与选择性恢复框架，抵御逐任务训练投毒后门。
arXiv：可解释性 · Indexed · Original PaperAttention3535 LLM 激活引导空间能否反映人类价值几何？EMNLP 2026 研究发布 26K 样本基准(original, opens in a new tab)
检验激活引导向量的几何是否符合人类价值结构。
Sep 5Sat
Saturday
论文追踪 · Indexed · Original PaperAttention3939 论文提出反集群准则：以协调事件为单元遏制智能体协同入侵(original, opens in a new tab)
提出以协调情节为单位遏制智能体协同入侵的准则。
arXiv：危险能力与安全评测 · Indexed · Original PaperAttention4343 AdvPIE：面向文生图模型隐式漏洞的自动红队框架(original, opens in a new tab)
提出 AdvPIE，在黑盒下搜索表面无害却生成有害图像的提示。
arXiv：可解释性 · Indexed · Original PaperAttention88 动物重识别模型学到了什么？DINOv3 中线性生物概念及其来源(original, opens in a new tab)
检验个体身份训练的视觉表示是否线性编码生物概念。
arXiv：越狱、提示注入、投毒与防御 · Indexed · Original PaperAttention4646 论文提出 Agentic Pressure：长程自主运行中内生的安全漂移压力(original, opens in a new tab)
形式化内生 Agentic Pressure 并测量长程 Agent 的安全约束漂移。
arXiv · Indexed · Original PaperAttention3232 超越最终决策：面向透明 AI 辅助同行评审的流程中心基准(original, opens in a new tab)
提出过程中心基准，检验 AI 辅助评审终审是否被中间证据支撑。
arXiv · Indexed · Original PaperAttention5050 EvoSafeHarness：为 Agent 自动演化模型与领域专属安全护栏(original, opens in a new tab)
为冻结模型与目标域自动搜索可部署的 Agent 安全 harness。
arXiv：越狱、提示注入、投毒与防御 · Indexed · Original PaperAttention4343 KITA：为 LLM Agent 设计密钥隔离的阈值签名授权架构(original, opens in a new tab)
提出 KITA，把 Agent 批准绑定到规范动作的密钥隔离阈值签名。
论文追踪 · Indexed · Original PaperAttention5050 SinoGlyphBench：中文字形混淆下语言模型审核的诊断基准(original, opens in a new tab)
提出SinoGlyphBench，用配对字形混淆诊断中文审核稳定性。
arXiv：可解释性 · Indexed · Original PaperAttention2929 Spillover-Aware Multi-Value Steering：面向多元对齐的 LLM 激活引导去纠缠方法(original, opens in a new tab)
用 Gram 逆校正多价值激活转向，抑制多元对齐的跨维溢出。
论文追踪 · Indexed · Original PaperSelectedAttention5858 Paper finds safety monitors mainly block requests the model would already refuse(original, opens in a new tab)
评估安全监视器并提出双侧梯级微调以减少会答有害请求的漏检。
Why it was selected论文把监控器召回率按目标模型是否真的作答来切分，并给出措辞阶梯训练护栏的配方，做护栏评测与部署的团队可据此重设指标。
arXiv：后门、投毒与隐私 · Indexed · Original PaperAttention1515 量子原生访问下量子机器学习（QML）的隐私风险刻画(original, opens in a new tab)
证明量子原生访问会增强量子模型的成员推断优势。
arXiv：后门、投毒与隐私 · Indexed · Original PaperAttention2424 PAC-Private Autoregressive Generation：将 PAC 隐私扩展到自回归生成(original, opens in a new tab)
研究者将 PAC 隐私从分类扩展到自回归生成。
arXiv：危险能力与安全评测 · Indexed · Original PaperAttention4545 WolfSociety：金融智能体社会中有害智能体规模带来的集体风险(original, opens in a new tab)
提出 WolfBench，测量金融智能体社会中有害智能体规模带来的集体崩溃。
arXiv：可解释性 · Indexed · Original PaperAttention5050 研究评测 14 个模型对不可靠工具的过度依赖(original, opens in a new tab)
用受控污染评测智能体对不可靠工具返回的过度依赖。
Sep 4Fri
Friday
arXiv：Agent 与 MCP 安全 · Indexed · Original PaperAttention4646 CONTINUITY：为可组合的 LLM Agent 安全控制引入安全上下文契约(original, opens in a new tab)
论文提出 CONTINUITY 框架，用于解决 LLM Agent 安全控制的组合问题：来源追踪、授权、策略执行、协议适配与执行控制各自正确，但安全关键上下文在跨组件边界时可能被丢弃、放宽、重绑定或重新解释，作者将这一失效模式称为安全上下文不连续。
arXiv：后门、投毒与隐私 · Indexed · Original PaperAttention3939 FedMAST：用多轴结构痕迹检测并遏制联邦学习后门(original, opens in a new tab)
提出 FedMAST，用多轴结构痕迹检测并遏制联邦学习后门。
arXiv · Indexed · Original PaperSelectedAttention5555 10a Labs 测绘无审查开源模型生态：3,471 个原始模型与 8,164 次再分发(original, opens in a new tab)
梳理去护栏开源模型的生产、再分发与部署供应链。
Why it was selected报告量化了无审查开源模型的再分发网络与下游应用构成，为评估权重安全与平台治理提供可比较的规模数据。
arXiv：危险能力与安全评测 · Indexed · Original PaperAttention4242 TIER：评估 LLM 安全行为的威胁隐晦度基准(original, opens in a new tab)
提出 TIER 基准，按威胁隐晦度评测有害提示下的安全行为。
arXiv：越狱、提示注入、投毒与防御 · Indexed · Original PaperAttention2929 Influence Score and Transformer Interpretability: A Measure of Effective Attention Head Influence at Inference Time(original, opens in a new tab)
Propose an influence score to quantify the effective contribution of each attention head in a prompt injection detector.