跳到正文
事件历史事件

LLM-Attacker:分离式LLM隐私评估红队框架

1篇报道1个报道来源最近报道

先了解这件事

AI 综述

研究者提出 LLM-Attacker 框架,用于记录、比较和扩展分离式与分布式大语言模型的隐私攻击评测。分离式模型把输入文本留在客户端,却把中间表示发送到服务器,攻击者可据此重建文本。该框架记录攻击者可见的消息、是否掌握模型权重以及所用数据集和恢复度量,兼容攻击可复用已记录消息,预测结果保存供独立评分;评分要求先有配套的无防御参考基线,防御才能判定通过,报告还会列出尚未测试的攻击。

AI 根据报道生成 · 25 天前更新

走势与进展

每小时关注度

现在 34,24 小时 0%·峰值 34(11月6日 03:00)

11月7日11月8日11月9日11月10日11月11日11月12日11月13日现在 34

相关研究

这件事的论文

后续时间线

10月26日
  1. 小红书小红书 上海交通大学 王烁老师· 讨论
    LLM-Attacker:模型拆开后隐私安全吗?(新标签页打开原帖)
10月16日
  1. arXiv:越狱、提示注入、投毒与防御
    LLM-Attacker:面向分离式与分布式LLM系统隐私评估的统一红队框架

    研究者提出 LLM-Attacker 框架,用于记录、比较和扩展分离式与分布式大语言模型的隐私攻击评测。分离式模型把输入文本留在客户端,却把中间表示发送到服务器,攻击者可据此重建文本。该框架记录攻击者能看到哪些消息、是否知道模型权重以及所用数据集和恢复度量,兼容的攻击可复用已记录的消息,预测结果保存下来供独立评分;评分规则要求先有配套的无防御参考基线,防御才能判定通过,报告还会列出尚未测试的攻击。在受控 GPT-2 实验中,加入训练时返回的梯度使 token 恢复率从 94.20% 升至 97.38%,完整文档恢复率从 13.71% 升至 37.77%,token 增益的 95% 区间高于测试前设定的 2 个百分点阈值。作者认为每项隐私主张都应写明攻击者、数据集和评分规则,报告控制项并标出未测试的攻击。

相关讨论

共1条

关注度走势

每小时关注度

当前关注度34·可比范围峰值34(11月6日 03:00)·近 24 小时可比范围变化 0%

01020304011月6日03:0011月8日11:0011月10日18:0011月13日02:00