评测与基准arXiv 2602.14161
当基准说谎:在真实分布偏移下评估恶意提示分类器
提出 LODO 评测恶意提示探针的跨数据集泛化
- arXiv
- 2602.14161
- 发表
- 层
- 模型层
- 场景
- 模型与 API
- 被测模型
- Llama-3.1-8B-Instruct、Gemma-3-27B、Qwen-3.5-4B 等5个
摘要作者称 LODO 露出 CV 高估,数据集身份与安全方向部分重叠,标准域泛化干预关不上。
LODO 用来检查恶意提示词分类器换成没见过的数据集后,还剩多少检测能力。。
提出 LODO 评测恶意提示探针的跨数据集泛化
LODO 用来检查恶意提示词分类器换成没见过的数据集后,还剩多少检测能力。。