事件历史事件
研究称被编辑模型的原始知识可经提示恢复
先了解这件事
AI 综述
研究者提出 Memento,一种通过提示空间干预审计编辑模型残留知识的机制,无需改动模型权重,即可引导被编辑模型恢复编辑前的回答。该方法学习可复用的恢复信号,支持连续恢复前缀和离散文本提示两种形式,适用于标准文本接口。在三个 LLM 和五种编辑技术上的实验中,Memento 恢复了 80.07% 的留出已编辑事实,较基线相对提升 9.58%;在未编辑的原始 LLM 上,平均事实召回较标准推理相对提升 53.9%。作者称结果展示了提示空间恢复在审计编辑模型残留知识方面的潜力,并将发布源代码。
AI 根据报道生成 · 5 天前更新
走势与进展
每小时关注度
现在 34,24 小时 0%·峰值 37(11月10日 22:00)
11月11日11月12日11月13日11月14日11月15日现在 34
相关研究
这件事的论文
- Token 之下的真相:语言模型中被编辑知识的提示空间恢复
arXiv · 2026-11-07 · 深度解读
后续时间线
11月7日
- arXivToken 之下的真相:语言模型中被编辑知识的提示空间恢复
研究者提出 Memento,一种通过提示空间干预审计编辑模型残留知识的机制,无需改动模型权重即可引导被编辑模型恢复编辑前的回答。该方法学习一个可复用的恢复信号,支持连续恢复前缀和离散文本提示两种形式,适用于标准文本接口。在三个 LLM 和五种编辑技术上的实验中,Memento 恢复了 80.07% 的留出已编辑事实,较基线相对提升 9.58%,表明编辑可能抑制事实但未完全消除其可恢复性。在未编辑的原始 LLM 上,Memento 将平均事实召回较标准推理相对提升 53.9%。作者称这些结果展示了提示空间恢复在审计编辑模型残留知识、研究事实知识与其推理时可及性差距方面的潜力,并将发布源代码。
相关讨论
关注度走势
每天新增来源
- 11月10日新增1个来源(1家媒体、0个账号)
- 11月11日新增0个来源(0家媒体、0个账号)
- 11月12日新增0个来源(0家媒体、0个账号)
- 11月13日新增0个来源(0家媒体、0个账号)
- 11月14日新增0个来源(0家媒体、0个账号)
- 11月15日新增0个来源(0家媒体、0个账号)