EmoRSS:缓解大语言模型由情绪引发的过度拒答
EmoRSS: Mitigating Emotion-Induced Over-Refusal in Large Language Models
AI 导读
研究发现情绪化表达会系统性提高大语言模型对良性请求的拒答倾向,造成不必要的过度拒答。为此提出的 EmoRSS 是一种激活引导方法:先用逐层线性探针定位拒答敏感层,并基于与探针方向对齐的稀疏自编码器(SAE)特征构建拒答子空间,再用同一查询的常规与情绪化请求对估计该子空间特征的平均激活偏移,将其解码为激活干预向量,在推理时沿反向拒答方向施加,且不更新主干参数。在两个大语言模型上的实验显示,当请求含情绪化表达时,EmoRSS 在拒答有害请求与回答良性请求之间取得了优于既有过度拒答缓解基线的权衡,同时更好地保留通用任务性能。