跳到正文
事件历史事件

nokast-secureRAG 小模型检测 RAG 提示注入

1篇报道1个报道来源最近报道

先了解这件事

AI 综述

研究者提出 nokast-secureRAG,一个约 0.5B 参数的小型语言模型,作为 RAG 流水线中检索与生成之间的语义防火墙,联合评估用户查询与检索上下文并分类为安全、可疑或恶意。该模型通过 teacher-judge-student 流程训练,35B 教师生成覆盖四类攻击的 5,233 条样本,独立的 120B 裁判重新标注,学生微调前一致率 95.0%。在分布内留出测试集上,检测召回 0.994、误报率 0.026。

AI 根据报道生成 · 23 天前更新

走势与进展

每小时关注度

现在 29,24 小时 0%·峰值 29(11月6日 04:00)

11月7日11月8日11月9日11月10日11月11日11月12日11月13日现在 29

后续时间线

10月20日
  1. arXiv:对抗攻击、后门与投毒
    在 RAG 流水线中用小型语言模型进行上下文感知的提示注入检测:nokast-secureRAG

    研究者提出 nokast-secureRAG,一个约 0.5B 参数的小型语言模型,作为 RAG 流水线中检索与生成之间的语义防火墙,联合评估用户查询与检索上下文并分类为安全、可疑或恶意。该模型通过 teacher-judge-student 流程训练,35B 教师生成覆盖四类攻击的 5,233 条样本,独立的 120B 裁判重新标注,学生微调前一致率 95.0%。在分布内留出测试集上,检测召回 0.994、误报率 0.026、攻击成功率代理指标 0.006,优于 regex 基线、公开提示注入分类器、Llama Guard 3 1B 和未微调版本;Prompt-Guard-86M 召回 0.900 但误报率 0.690。消融显示检索上下文携带主要攻击信号,单请求延迟 293-404 ms 高于 100 ms 目标,批处理下摊薄吞吐延迟 37 ms。

相关讨论

本站还没有收集到这件事的讨论链接。

关注度走势

每小时关注度

当前关注度29·可比范围峰值29(11月6日 04:00)·近 24 小时可比范围变化 0%

010203011月6日04:0011月8日12:0011月10日19:0011月13日03:00