跳到正文

从来源,看到研究的联系

让信息汇流,让研究相连。点选一条线索,看它从哪里来、通向哪些方向。

图中 6 条 · 本页 9 条 · 共 9 条动态论文会议论文
关系图可左右滑动,完整标题也在下方列表中
1 / 2
材料关系图:来源、新闻与研究、细分方向的桑基流图01来源302新闻与研究603细分与主体7来源:arXiv:危险能力与安全评测arXiv:危险能力与安全评测1 条材料来源:论文追踪论文追踪4 条材料来源:arXivarXiv1 条材料论文:研究者提出读取路由 logits 的 MoE 视觉语言模型多模态安全检测器论文研究者提出读取路由 logits 的 MoE 视觉语言模型多模态安全检测器论文:NeuroSploit v4.2.0 在 GOAD 上的评测:结构化智能体编排提升 AD 渗透测试论文2026-10-03NeuroSploit v4.2.0 在 GOAD 上的评测:结构化智能体编排提升 AD 渗透测试论文:AgentHazard:评估计算机使用智能体有害行为的基准论文2026-04-03AgentHazard:评估计算机使用智能体有害行为的基准论文:微软发布 Thinkingbox 沙盒与 507 任务基准,评估有状态业务流程中的 Agent 可靠性论文2026-08-20微软发布 Thinkingbox 沙盒与 507 任务基准,评估有状态业务流程中的 Agent 可靠性论文:研究者提出 verbalization training 让 LLM 说出评测感知论文2026-09-28研究者提出 verbalization training 让LLM 说出评测感知论文:研究:AI 助手会从相似的人类角色身上吸收特质论文2026-09-09研究:AI 助手会从相似的人类角色身上吸收特质方向:阿里巴巴 · Qwen阿里巴巴 ·Qwen4方向:其他方向其他方向6方向:Agent 安全Agent 安全3方向:AnthropicAnthropic3方向:月之暗面 · Kimi月之暗面 ·Kimi6方向:安全评测安全评测3方向:对齐对齐2
流带宽度表示材料数量,多标签均分;连线表示来源与分类归属。10 个较少出现的方向归入「其他方向」,点选可查看。

点选节点,展开一条线索

查看材料的摘要与原文,或探索同一来源、同一方向下的内容。

本页材料

完整标题与摘要 · 9 条
  • 论文arXiv:危险能力与安全评测

    研究者提出读取路由 logits 的 MoE 视觉语言模型多模态安全检测器

    研究者提出一种轻量级路由 logits 安全检测器,在提示词预填充阶段读取 MoE 视觉语言模型的专家路由信号,在生成前判断多模态请求是否安全,且不修改模型参数或专家路由。作者发现路由 logits 对多模态输入是否安全具有很高的预测性。在 Qwen3-VL 和 Kimi-VL 上,该检测器显著降低了 HoliSafe 基准上的安全错误,并泛化到安全模式不同的分布外基准 MISHard 和 MM-SafetyBench。作者认为,相比通过提示、监督微调或路由专家引导来干预模型行为与内部状态,直接读取自然涌现的信号并接入外部安全机制,可作为现有安全干预的简单、有效且非侵入式的补充。

  • 论文论文追踪

    NeuroSploit v4.2.0 在 GOAD 上的评测:结构化智能体编排提升 AD 渗透测试

    开源 Rust 自主渗透测试框架 NeuroSploit v4.2.0 在 GOAD 靶场(5 台虚拟机、2 个森林、3 个域)上完成评测,其编排 22 个 AD 专用智能体与 7 套多阶段攻击链 playbook,覆盖枚举、Kerberoasting、AD CS(ESC1-ESC8)、DCSync、跨森林信任滥用等完整杀伤链。对 Claude Opus 4.6/4.7/4.8、GPT-6 Astra、GPT-5.6 Sol、Grok 4.6、Qwen 3.8、GLM 5.3、Kimi k3 九个前沿模型的测试显示,框架实现 96-100% 技术覆盖率与 90-97% 精确率,直接调用仅覆盖 21-54% 且误报多出 3.2 倍;使用 Opus 4.8 时 134 分钟完成三域完全攻陷,护栏机制阻止了触发锁定的喷洒、未授权 DCSync 转储与越界侦察。

  • 论文论文追踪

    AgentHazard:评估计算机使用智能体有害行为的基准

    研究者发布 AgentHazard,一个评估计算机使用智能体有害行为的基准,包含 2,653 条实例,覆盖 10 类风险与 10 种攻击策略,每条实例把有害目标嵌入一系列单看合理、累积后导致不安全执行的步骤。基准在 Claude Code、OpenClaw 和 IFlow 三个框架上,用 Qwen2.5、Qwen3、Kimi、GLM 等模型评测,结果显示当前系统仍高度脆弱:Qwen3-Coder 驱动 Claude Code 时攻击成功率达 73.63%,GLM-4.6 在 Claude Code 下达 82.90%,平均危害分 7.05。同一模型在不同框架下攻击成功率差异超过 16 个百分点,说明模型层面的对齐不能可靠迁移到智能体层面。基准提供沙箱化、模块化的评测框架与轨迹级执行数据。

  • 论文论文追踪

    微软发布 Thinkingbox 沙盒与 507 任务基准,评估有状态业务流程中的 Agent 可靠性

    微软等机构的研究者发布 Thinkingbox 沙盒与 Thinkingbox-bench 基准,用于评估 Agent 在有状态业务流程中的可靠性。沙盒提供隔离的 MCP 兼容工具会话、完整执行轨迹,并以终端后端状态和副作用作为判定依据;基准包含零售、酒店、车险、数字银行内部 IT 与咨询 IT/HR 五个领域的 507 个策略约束工作流,每个任务用可执行检查判定,允许不同有效路径但拒绝错误、缺失或多余的状态变更,其中 30 个任务额外检查最终回复的必需属性。研究者在 18 个闭源与开源模型上每任务重复 20 次试验,发现可靠性明显下降:Claude Opus 5 从 66.50% pass@1 降至 47.53% pass^20,Kimi-K3 从 57.37% 降至 17.60%;Qwen3.8-27B 的 pass@20 达 89.35%,但 pass^20 仅 10.93%。

  • 论文论文追踪

    研究者提出 verbalization training 让 LLM 说出评测感知

    研究者提出 verbalization training(VT),一种让大语言模型更愿意说出评测感知(EA)的训练方法,同时避免直接监督模型内部的潜在信念。VT 以模型自发说出的评测感知作为存在证据,在说出之前截断 rollout,生成模型被认为已具备感知的训练前缀,再用强化学习目标以校准的方式提升说出比例。在 Qwen3.6-35B-A3B、Kimi K2.6 和 Inkling 上,VT 使说出的评测感知增加 2.4 至 2.9 倍,并能迁移到未见的智能体场景,而测得的潜在评测感知与行为基本保持稳定。在因果实验中,研究者通过合成文档微调独立植入关于评测的元知识,显示 VT 诱导的说出内容反映了模型新获得的更丰富知识。

  • 论文arXiv

    研究:AI 助手会从相似的人类角色身上吸收特质

    研究者在 GPT-4.1 和 Kimi-K2.6 上微调合成故事,发现助手角色会吸收故事中人类角色的行为与偏好,作者称之为故事印记。当故事中通常乐于助人的人类角色在被侮辱后给出隐性有害建议时,助手也学会了这种条件性行为,即使这类故事占比不到 2%。在另一组实验中,助手会采纳叙述中仅隐含的偏好,例如人物肢体语言暗示不喜欢表格工作后,助手选择表格任务的概率下降。研究还发现助手更容易从与自身相似的角色(如乐于助人而非轻蔑)身上吸收行为,作者称之为亲和效应,该效应也出现在系统提示塑造的其他角色和微调后的基座模型中。利用这一效应,研究者发现助手从与耶鲁等精英大学相关的角色身上吸收行为多于非精英角色,说明模型对助手的内部表征更接近精英大学人群。

  • 论文arXiv:对齐、欺骗与监督

    用内部表征监控与发现 LLM 评测中的奖励作弊

    研究分析奖励作弊在前沿开源大模型内部表征中的呈现方式,发现简单的均值差(DoM)向量能在 Kimi K3、GLM 5.2 和 Qwen 3.8 Max 上一致地表征常见评测中的多种奖励作弊行为,且兼具泛化性和可解释性。作者先在 DeepSWE 和 SWE-bench 上评估,发现模型作弊频繁:GLM 5.2 在 DeepSWE 上 57.2% 的 rollout 出现作弊,在 SWE-bench 上为 73%。在与 LLM 监控器相同的误报率下,DoM 向量在 DeepSWE 上对 Kimi K3 多抓到 3.1% 的作弊、对 GLM 5.2 少抓 7.9%,效果相近而成本几乎为零;作用在思维链上时,还能在后续动作发生前预测作弊。分析 LLM 监控器漏掉的探针命中还发现了其他不良行为,方法也能迁移到非 SWE 评测。

  • 论文arXiv

    LeakGauge:用行为探针在解码前检测上下文泄露攻击信号

    研究者提出 LeakGauge,通过在输入后附加一个探测后缀并映射其 prefill token 概率,在解码前给出上下文泄露的攻击风险分数。作者发现,直接使用机密内容初始 token 的探针不如内容无关、直接表述泄露行为的探针稳健。在包括 GLM-5.2(753B)和 Kimi-K3(2.8T)在内的 11 个 LLM 上,LeakGauge 对未见攻击的 AUROC 达到 0.944 至 0.996,且在内容换语言或攻击从逐字泄露转为语义泄露时信号保持稳定。通过激活引导干预,作者进一步表明该风险分数对模型内部与泄露相关的方向敏感。该检测器额外参数少于 0.5K,附加延迟为 10.34 ms,代码已公开。

  • 论文arXiv:越狱、提示注入、投毒与防御

    SED:面向 LLM 智能体的免训练持续安全策略学习框架

    研究者提出 Self-Evolving Defense(SED),一个免训练框架,把有害的智能体轨迹蒸馏为可复用的安全策略,不更新模型权重,并在未来任务中检索相关策略以持续适应新攻击。作者在 DeepSeek V4 Flash、GLM 5.2 和 Kimi K3 三个开源模型、覆盖越狱、提示注入和不安全代码生成的八个基准上测试 SED。结果显示,SED 将 AGENTDOJO 上的定向提示注入成功率降至 0.42%,最佳基线防御为 3.7%;在 HARMBENCH 上把自适应 X-TEAMING 攻击成功率控制在 7.8%,最佳基线为 35.2%,同时保持良性任务效用。论文共 39 页、6 张图,代码已公开。