跳到正文
事件历史事件

研究称被编辑模型的原始知识可经提示恢复

1篇报道1个报道来源最近报道

先了解这件事

AI 综述

研究者提出 Memento,一种通过提示空间干预审计编辑模型残留知识的机制,无需改动模型权重,即可引导被编辑模型恢复编辑前的回答。该方法学习可复用的恢复信号,支持连续恢复前缀和离散文本提示两种形式,适用于标准文本接口。在三个 LLM 和五种编辑技术上的实验中,Memento 恢复了 80.07% 的留出已编辑事实,较基线相对提升 9.58%;在未编辑的原始 LLM 上,平均事实召回较标准推理相对提升 53.9%。作者称结果展示了提示空间恢复在审计编辑模型残留知识方面的潜力,并将发布源代码。

AI 根据报道生成 · 5 天前更新

走势与进展

每小时关注度

现在 34,24 小时 0%·峰值 37(11月10日 22:00)

11月11日11月12日11月13日11月14日11月15日现在 34

相关研究

这件事的论文

后续时间线

11月7日
  1. arXiv
    Token 之下的真相:语言模型中被编辑知识的提示空间恢复

    研究者提出 Memento,一种通过提示空间干预审计编辑模型残留知识的机制,无需改动模型权重即可引导被编辑模型恢复编辑前的回答。该方法学习一个可复用的恢复信号,支持连续恢复前缀和离散文本提示两种形式,适用于标准文本接口。在三个 LLM 和五种编辑技术上的实验中,Memento 恢复了 80.07% 的留出已编辑事实,较基线相对提升 9.58%,表明编辑可能抑制事实但未完全消除其可恢复性。在未编辑的原始 LLM 上,Memento 将平均事实召回较标准推理相对提升 53.9%。作者称这些结果展示了提示空间恢复在审计编辑模型残留知识、研究事实知识与其推理时可及性差距方面的潜力,并将发布源代码。

相关讨论

本站还没有收集到这件事的讨论链接。

关注度走势

每天新增来源

6天共1个·最多1(11月10日)·今天0

  • 11月10日新增1个来源(1家媒体、0个账号)
  • 11月11日新增0个来源(0家媒体、0个账号)
  • 11月12日新增0个来源(0家媒体、0个账号)
  • 11月13日新增0个来源(0家媒体、0个账号)
  • 11月14日新增0个来源(0家媒体、0个账号)
  • 11月15日新增0个来源(0家媒体、0个账号)

每小时关注度

当前关注度34·可比范围峰值37(11月10日 22:00)·近 24 小时可比范围变化 0%

01020304011月10日22:0011月12日13:0011月14日03:0011月15日18:00