Persona Explorer:用 SAE 探索 LLM 中的人格与人格漂移
Persona Explorer: Using SAEs to Explore Personas and Drift in LLMs
AI 导读
该项目用稀疏自编码器(SAE)从模拟不同人格的大语言模型中提取可解释特征并搭建浏览界面,实验基于 Gemma 3 27B 指令微调模型的 Gemma Scope 2 SAE(作用于第 40 层残差流,约 65k 特征)。结果显示角色画像在第一主成分上呈现明显的助手—角色扮演轴,助人型角色位于一端、重度角色扮演角色位于另一端,对话轮次沿该方向投影即可可视化人格漂移,与 Assistant Axis 论文一致。