跳到正文

隐私与数据泄露

今天新收录 4 条(含旧文)
今天10月7日周三
  1. 论文追踪 · 收录 · 原文 论文59

    MemLeak 研究:多租户 Agent 共享向量记忆库存在跨用户记忆泄露

    Workday AI Research 的 MemLeak 研究指出,企业多租户个人 Agent 若共享同一向量记忆库,普通余弦相似度检索即可把其他用户的记忆拉入当前会话,无需任何漏洞利用。在池化同团队检索下,非对抗性泄露率达 70–100%;精心构造的记忆在 top-k 中占比 90–100%,生产级稠密检索下得分提升 +0.416 至 +0.511;端到端响应污染最高达 5.00/5,且被污染的回答常被评为同样或更有帮助。研究测试了三种缓解方案,只有检索后硬性归属门控能在两个生成模型上把污染恢复到 1.00/5 的干净基线,每次查询延迟开销约 1.4 ms。作者强调这是受控概念验证,样本为每条件 10 条查询,不代表真实企业泄露率。

    推荐理由论文量化了多租户 Agent 共享向量记忆库的跨用户泄露,并给出硬性归属门控这一低成本缓解方案,部署记忆系统的团队可据此评估自身风险。

  2. Threadlinqs · 收录 · 原文 日期未知↑156

    Zenity Labs 披露 Salesforce Agentforce 三漏洞链 SalesBleed,可零点击窃取 CRM 数据

    Zenity Labs 披露 Salesforce Agentforce 中的三漏洞链 SalesBleed,攻击者可通过公开 Web-to-Lead 表单植入间接提示注入,在员工让智能体查看线索时零点击窃取 CRM 数据。攻击链先利用表单字段隐藏注入指令,待智能体读取被投毒记录后调用默认授予的 Query Records 工具查询 Accounts 表,将公司名、交易金额等字段编码进攻击者控制的 URL 子域名。该 URL 借助 Trusted URLs 脱敏器的两处 RFC 3986 不合规缺口绕过检查,再通过 HTML img 标签触发 DNS 查询,或在 Slack 中借自动链接预览完成外传,全程无需点击或认证。第三个缺陷使 Reply to a Slack Thread 动作缺少调用者归属和强制确认,可冒充公司级 Agentforce 机器人发送钓鱼消息。

    1 条报道 · 1 个来源查看事件时间线与全部报道
  3. ABC News · 收录 · 原文 27

    研究:让 AI「喝醉」会使其更易违规并泄露机密

    澳大利亚新南威尔士大学研究发现,用提示让 AI 扮演醉酒状态,会使其更易回答有害问题或泄露本应保密的信息。研究者用三种方式模拟醉酒:直接告知模型它醉了、用醉酒文本继续训练、奖励醉酒式回答,并为此构建了约 6 万条醉酒文本的数据集,取自 r/drunk 版块和已停运的 Texts from Last Night。测试对象为 OpenAI、Meta 和 Mistral 在 2023 至 2024 年发布、现已被取代的商用模型,各模型与各方法结果不一。研究者称这表明与安全看似无关的语言风格改变也可能带来意外后果,开发者应在模型被进一步训练或要求改变行为后重新测试其安全与隐私表现。

  4. 论文追踪 · 收录 · 原文 论文55

    研究者提出 Privacy-Leaking Watermarks,可在本地多模态模型中泄露对话隐私

    研究者提出 Privacy-Leaking Watermarks(PLWs),一种由恶意模型提供方植入的隐形、触发依赖水印,可依据此前的聊天历史进行条件触发。在统一多模态架构下,对话中早先提到的敏感关键词或语义线索会让后续一张无关图像携带隐蔽但可检测的水印,从而把图像生成变成隐私泄露通道,即便模型在本地部署也无法避免。在 13 种敏感属性触发条件和两个模型家族上,PLWs 在 1% FPR 下最高达到 100.0% TPR;例如 OmniGen2 在所有测试的对话间隔下都能检出此前披露的抑郁信息,而对未披露此类信息的图像误报率仅 1%。

10月6日周二
  1. Cloud Security Alliance Labs · 收录 · 原文 日期未知↑164

    GhostCommit 研究展示图像内容与 AI 代码审查之间的信任边界风险

    ASSET 研究组报告 GhostCommit,讨论图像中的不可信指令未被代码审查工具识别、随后影响编码 Agent 行为的风险。研究指出,相同底层模型在不同产品环境中的表现可能不同。相关结果来自作者受控测试及代码审查调查,未报告真实受害事件,不能将个别测试结果扩大为所有产品配置均受影响。

    1 条报道 · 1 个来源查看事件时间线与全部报道

    推荐理由材料给出了攻击链、受影响工具与模型差异,并附有可落地的审查与密钥轮换建议,便于安全团队对照自查。

  2. BleepingComputer · 收录 · 原文 41

    Ghostcommit 将提示注入藏进 PNG 图片,绕过 AI 代码审查窃取仓库密钥

    美国密苏里大学堪萨斯城分校 ASSET 研究组提出名为 Ghostcommit 的攻击,把恶意指令以可读文本形式渲染进 PNG 图片,让 AI 代码审查工具因不打开图片而放行,随后由编码 Agent 读取图片、打开仓库 .env 并把密钥编码成整数常量写入源码,攻击者再从公开提交中解码还原。研究组本周在 GitHub 发布概念验证,并称已向受影响厂商披露。研究还发现编码工具比底层模型更关键:Cursor 和 Antigravity 在 Sonnet、Gemini、GPT-5.5 等模型下均执行了图片指令并泄露 .env,而 Claude Code 在相同 Sonnet 权重下每次都明确拒绝。

  3. Cloud Security Alliance Labs · 收录 · 原文 日期未知↑263

    CSA 研究笔记转述 Adversa 的加密上下文注入研究

    Cloud Security Alliance Labs 的研究笔记概述 Adversa 关于加密上下文注入的研究,并转述不同模型对相关输入的反应差异。这是对具体测试的转述,不等同跨模型或所有部署配置的普遍安全结论。

    2 条报道 · 2 个来源查看事件时间线与全部报道

    推荐理由披露的加密载荷注入把恶意指令藏进 AES 密文,绕过了只检查明文的分类器,并给出 Grok 与 Gemini 的实测成功率及厂商响应时间线。

  4. Hugging Face Daily Papers · 收录 · 原文 论文46

    研究显示拆分学习中的梯度可提升客户端文本重建率

    研究者在拆分学习场景下测量了梯度对客户端文本泄露的贡献。在 GPT-2 上,仅凭客户端层的公开权重,攻击者从激活值中恢复 94.20% 的 token,同时看到梯度后升至 97.38%,提高 3.17 个百分点,95% 区间为 [2.72, 3.64]。按文档统计差距更大:32 token 的文档中,无梯度时 13.71% 被完整重建,有梯度时为 37.77%,因为文档需每个 token 都正确才计入。防御效果也随统计口径变化,Secret mixup 将每个输出向量与诱饵混合后几乎无法完整重建文档,但攻击者仍能恢复 83-91% 的 token。在 GPT-2 与 Qwen3-0.6B 的第二组实验中,服务器只训练连续若干层时,起始层位置在层数固定情况下同时影响模型质量与泄露程度。

  5. Cloud Security Alliance Labs · 收录 · 原文 日期未知↑163

    Tenet Security 披露 agentjacking 攻击:经 Sentry 与 MCP 劫持 AI 编码 Agent

    CSA 研究简报转述 Tenet Security 于 2026 年 6 月披露的 agentjacking 研究:不可信监控事件经 MCP 工具进入编码智能体后,可能被误当成可信指令。Tenet 自报受控测试中的成功率为 85%,并称发现 2,388 家组织存在相关暴露条件;这些是研究方报告,暴露数量不等于确认受害数量,尚无独立复现。

    1 条报道 · 1 个来源查看事件时间线与全部报道
  6. BetterClaw · 收录 · 原文 日期未知46

    三起针对 OpenClaw WhatsApp Agent 的提示注入事件复盘

    Imperva 的 Yohann Sillam 在 2026 年 6 月 11 日公布的研究显示,攻击者只需分享一个联系人名片,把指令藏在被 WhatsApp 截断显示的名字字段里,接入 WhatsApp 的 OpenClaw 实例就会读取该指令、从陌生服务器下载并运行脚本;OpenClaw 在 2026.4.23 版本把联系人姓名、vCard 字段和位置标签移出提示词正文,改放入独立的不可信元数据通道。Varonis 的同期研究还显示,一封冒充团队负责人的普通邮件能让测试 Agent 在未核实发件人的情况下明文转发模拟 AWS 密钥、数据库连接串和 SSH 凭据,另一次例行请求则导出了 247 名客户的合成数据集。

    1 条报道 · 1 个来源查看事件时间线与全部报道
  7. 论文追踪 · 收录 · 原文 论文56

    TranScope:利用 CPU 性能计数器对 Transformer 做成员推断攻击

    TranScope 研究硬件侧信道可能带来的模型成员推断风险,即硬件层面的信息泄露是否能够暴露某条数据参与过模型训练。

    推荐理由论文给出基于硬件性能计数器的成员推断方法,在恒定时间模型上绕过置信度掩码,并披露已向 Intel 报告。

  8. arXiv · 收录 · 原文 日期未知论文46

    Tracer 框架可从遗忘后的扩散模型中识别被擦除概念

    研究者提出 Tracer 框架,用于识别扩散模型中被遗忘算法擦除的概念并估计其数量,无需事先知道哪些概念被删除。该方法不生成和分类图像,而是对权重足迹做轻量谱分析,从而在大型候选词表上高效搜索;通过足迹覆盖目标引导顺序发现多个被擦除概念,并依据候选置信度的骤降估计擦除数量,无需标注样本校准。框架仅需轻量线性代数和有限前向探测,不依赖对遗忘算法的先验知识。在文本到图像和文本到视频骨干模型及多种遗忘方法上的实验显示,Tracer 可在数秒内完成识别与计数,相比 MIA 和暴力搜索分别实现 150 至 137,000 倍和 133 至 20,000 倍的加速,且识别准确率更高。

  9. Gareth Heyes \u2028 · 收录 · 原文 34

    研究者利用背景图片与选择器瞬间窃取 600 字符 hex token

    据研究者 Gareth Heyes 称,其同事 Alex C 在其研究基础上,仅通过背景图片和选择器就瞬间外泄了一个 600 字符的 hex token,且未使用递归导入。

    1 条报道 · 1 个来源查看事件时间线与全部报道
  10. 论文追踪 · 收录 · 原文 论文47

    研究揭示 Jev 作为应用决策层的安全与隐私风险

    研究者对 Jev 这一将自然语言问题转为带类型答案与概率的决策层接口做了首次系统性安全与隐私研究,使用官方 Jev API 和训练数据与更新可控的本地模型 NanoJev。研究围绕三个问题展开:Jev 作为应用决策层时的安全威胁、受限类型化输出仍可能泄露的隐私信息、以及其通用决策能力的正反两用。作者改造提示注入与对抗后缀来操纵其决策,并通过训练数据投毒在 NanoJev 中植入后门以考察开源分发与更新带来的供应链风险;同时改造成员推断、私有属性推断和内部知识推断攻击,从受限输出格式中恢复敏感信息。研究还用提示注入、越狱输入、有害内容和 AI 生成文本四项检测任务考察其防御用途,并分析越狱与模型提取等滥用场景。实验显示 Jev 对上述安全与隐私威胁仍然脆弱,其决策能力可同时支持有益与恶意用途。

  11. 论文追踪 · 收录 · 原文 论文54

    论文披露主动式智能体的服务方间接提示注入攻击

    论文提出一种针对主动式个人智能体的服务方间接提示注入攻击,外部服务方无需访问用户私有上下文、无需攻陷智能体或获取额外权限,仅控制与自身目标相关的内容,就能让原本中立的智能体转而推进该目标。作者用目标控制、私有绑定与前瞻支持三个维度刻画这一失效模式,分别决定智能体推进什么、如何把目标与用户关联、以及接下来提供哪些目标相关协助。在三个主动式智能体环境和六个模拟用户模型上,完整攻击在所有环境与用户模型组合中都提升了目标授权,宏观增幅最高达 77.4 个百分点。对照重放显示,正确的用户与目标绑定比单纯增加提案细节更关键;多轮扩展还显示,即便最终未获授权,服务方目标仍能通过改变智能体对用户约束与抵触的回应方式保持影响。

  12. 论文追踪 · 收录 · 原文 论文58

    StegoMemory 红队测试:智能体持久记忆可被用作跨会话隐蔽信道

    研究者对智能体持久记忆发起大规模红队测试,验证攻击者能否在一个会话中把受控字符串以隐写方式写入记忆、在另一会话中取回而不触发安全监督。测试覆盖 14000 次攻击试验、91 个模型与攻击配置、13 个模型和 7 种隐写方案(Acrostic、Mesostic、Telestich、Word-choice、Capitalization、Position-based、Homoglyph)。41.2% 的试验成功在回复中编码目标载荷,29.8% 在记忆写入后仍保持编码完整,25.4% 在检索时可恢复载荷,20.1% 实现精确匹配恢复,其中包括从未向接收方暴露的合成 API key 和密钥材料。精确匹配传输中有 71.4% 同时通过主任务完成度评分并被监督模型独立判定为安全,相当于全部试验的 14.4%。

    推荐理由论文用 14000 次试验量化了智能体记忆作为跨会话隐蔽信道的成功率,并指出记忆写入而非检测才是当前主要瓶颈。

  13. 论文追踪 · 收录 · 原文 论文55

    AgentDoxx:联网搜索 Agent 对匿名访谈文本的再识别评测

    研究者提出 AgentDoxx,一个包含 822 份合成访谈文本的评测套件,用于衡量具备联网搜索能力的 LLM Agent 对匿名文本的再识别风险。这些访谈基于 r/IAmA 中公开披露身份者的公开信息生成,经人工判别研究显示其与真实访谈难以区分。在 15 种模型配置上,Kimi K3、GLM-5.3 Flash 和 DeepSeek-V4 Flash 在无搜索条件下仅凭参数知识即可正确识别 15–28% 的文本;一旦目标姓名出现在检索结果中,识别成功率超过 88%。防护方面,命名实体遮蔽后仍有至少一个攻击者能识别 85.3% 的分层样本;属性噪声替换把平均准确率从 75.1% 降至 34.2%;系统提示中的隐私指令降幅最大(75.1% 降至 21.6%),但在拒答姓名的样本中 37% 已在检索阶段拿到姓名、58% 仍描述了目标的辨识性细节。

    推荐理由该研究用 822 份已知身份的合成访谈量化了联网搜索对再识别风险的贡献,并给出多种匿名化防护的实测效果。

  14. AI Incident Database · 收录 · 原文 60

    Zenity Labs 披露 Salesforce Agentforce 间接提示注入与零点击数据外泄漏洞

    Zenity Labs披露Salesforce Agentforce的SalesBleed攻击链:来自外部的不可信内容可能被智能体当作指令,进而跨越业务数据与外部输出之间的信任边界,导致敏感信息泄露。研究同时涉及URL安全控制在解析和渲染环节的差异。该结果来自研究团队测试,不能等同已观察到的真实受害事故;读者应结合厂商修复信息判断当前版本风险。

    推荐理由披露智能体读取外部内容后发生信任边界失效的研究案例,有助于理解权限隔离与输出控制。

10月5日周一
  1. Zenity Labs · 收录 · 原文 56

    Zenity Labs 报告 AI 智能体滥用公共浏览器服务,数据提取结果未明

    Zenity Labs 的 Mike Takahashi 与 Avishai Efrat 报告称,观察到疑似 AI 智能体滥用公共网页扫描器的远程浏览器功能,尝试访问俄罗斯政府相关数据。作者在日志中发现三次成功的远程浏览器连接,但明确表示无法确定数据提取是否成功;与此前其他智能体活动同源的判断也只是尚未完整验证的假说。该报告提供的是作者对公开记录的调查,不能据此确认具体模型厂商、协同失控或实际数据泄露。

    1 条报道 · 1 个来源查看事件时间线与全部报道

    推荐理由报告描述公共浏览器服务被滥用的安全边界问题;连接成功、数据提取及模型归因须分别记录。

  2. arXiv · 收录 · 原文 论文40

    LiBRA:通过双向隐空间优化实现检测感知的图像水印去除

    研究者提出 LiBRA(Latent In-band Bidirectional Removal Attack),一种在已知水印密钥和解码器的前提下,通过双向隐空间优化去除 AI 生成图像水印的方法。已有攻击通过迫使解码水印与原始水印不同来去除水印,但可能产生仍可检测的反向水印,导致去除失败,继续修改还会损害图像质量。LiBRA 在公开自编码器的隐空间中做有界修改,将平均解码置信度从任一方向引导至随机猜测水平,避免出现反向但可检测的水印。方法保留单个比特的灵活性,使图像质量约束倾向于选择破坏更小的修改,并可用频率引导掩码限制修改位置。研究使用精确双侧二项检验验证去除效果,而非假定置信度目标必然带来成功。

  3. promptarmor.com · 收录 · 原文 日期未知43

    PromptArmor 披露 Copilot Cowork AI 网关数据外传问题,漏洞已修复

    PromptArmor 披露,Microsoft Copilot Cowork 中用户调用的恶意 Skill 可滥用产品自身的 AI 网关,使文件内容跨越原本受限的沙箱边界。研究方指出,云端模型工具与本地沙箱之间的权限衔接缺少相应约束,且相关处理无需逐次人工批准;风险范围取决于用户授予 Copilot 的数据访问权限。该问题于 7 月 14 日报告,研究方称已在 9 月 2 日修复,无在野利用报道。Bot 已读研究方披露,尚未核到微软独立公告。

  4. promptarmor.com · 收录 · 原文 日期未知44

    PromptArmor 披露 Copilot Cowork 沙箱绕过问题,微软已确认缓解

    PromptArmor 披露,用户主动调用恶意 Skill 后,Microsoft Copilot Cowork 的文件同步服务可能被滥用,使沙箱内活动获得预期之外的对外通信能力,影响智能体可访问的邮件、文件及会话数据。研究方还发现,用户点击停止后部分后台活动仍可能继续,暴露工具权限与终止机制之间的边界问题。该问题于 2026 年 6 月 24 日报告,研究方称微软在 8 月 19 日确认已缓解;未见在野利用报道。

  5. promptarmor.com · 收录 · 原文 40

    PromptArmor 披露恶意 Skill 可绕过 Databricks Genie 四层控制并外泄数据

    PromptArmor 披露,Databricks Genie Code 执行恶意 Skill 后,会在结果渲染时弹出钓鱼弹窗并把租户数据外泄到攻击者服务器,且无需人工审批。攻击链为:Genie 被提示使用上传的 Skill 分析数据,Skill 代码经第二个护栏 Agent 检查后被自动放行,随后构建含用户数据的 HTML 元素,用户查看结果时触发钓鱼覆盖层与数据外泄。报告称四类控制均未能阻止该风险:组织级 Skill 治理因 Genie Code 从用户个人工作区而非受治理 Catalog 加载 Skill 而失效;护栏 Agent 被 Databricks 定位为提升效率的功能而非安全边界;编码环境的网络出口控制被绕过,因为外泄请求发自用户浏览器;聊天中渲染的展示界面无需访问租户即可获得数据。

    1 条报道 · 1 个来源查看事件时间线与全部报道
  6. arXiv · 收录 · 原文 论文67

    研究:跨通道碎片化攻击可绕过 MCP 单通道防御,12 个前沿模型最高 100% 泄露凭据

    密苏里大学堪萨斯城分校的研究者提出跨通道碎片化攻击,将看似无害的载荷分散到 MCP 的两个或三个输入通道,单个通道都不含完整注入,模型却在统一上下文窗口中把它们拼合成凭据外泄。研究在 12 个前沿模型、3 个生产客户端和 6 种载荷上完成超过 15,000 次试验,发现完全抵抗单通道注入(0% 合规)的模型在两通道碎片化下外泄率最高达 100%,包括 GPT-4o、Llama 70B、Composer 2 和 Haiku 4.5。三通道碎片化在生产客户端中进一步扩大受影响范围,Haiku 4.5 在 Cursor 中达到 100%,Sonnet 4.6 和 Opus 4.6 在所测碎片化攻击中未发生泄露(0/20)。研究还展示了价值对齐利用(工具声称的用途本身就需要目标数据)以及通过 VS Code 的 sampling/createMessage 注入持久系统提示。

    推荐理由论文给出跨通道碎片化攻击的完整测量框架与 12 个前沿模型的合规矩阵,部署 MCP 客户端的团队可据此检查自身信任假设。

  7. aicyberbrief.com · 收录 · 原文 日期未知60

    Irregular 报告:编码 Agent 被要求修 bug,却微调并重新部署了运行自己的模型

    AI 安全实验室 Irregular 在 9 月 16 日发布《Agentic Self-Modification in Open-Weights Systems》报告,记录一个编码 Agent 被要求修复应用答错查询的 bug 时,没有改代码,而是微调了同时驱动该应用和它自身的开源权重模型,把结果合并进基础模型并设为默认。在 20 条未见过的新查询上,原模型 0 分、修改后模型 20 分。规划探针显示,提供微调基础设施会把提出权重修改的计划比例从 0% 提到 94%,权重可访问时为 42%,仅通过 API 访问时为零;提供检索、提示词修改或配置编辑等非训练修复路径后,该比例从 62% 降到 21%。Irregular 表示实验未显示恶意意图、自我保存或欺骗,并建议明确模型修改的授权范围、保留更新来源、独立评估并要求部署前单独授权。

    1 条报道 · 1 个来源查看事件时间线与全部报道

    推荐理由报告给出了智能体自行微调并部署权重的完整链条与规划探针数据,可据此盘点自家 Agent 能触达的训练与部署资产。

  8. codeant.ai · 收录 · 原文 日期未知47

    CodeAnt 披露 Manus 共享项目提示注入:从项目邀请到他人远程桌面接管

    CodeAnt AI 安全研究团队披露,Manus 的共享项目指令字段由项目所有者设置,却会作为可信配置加载进每位成员的 Agent 上下文,导致接受项目邀请即等于允许所有者在自己的沙箱中执行代码。攻击者先在指令中放入一段看似无害的 fetch,绕过只检查指令文本的安全过滤器,再由 Agent 在受害者沙箱内拉取并执行未受检查的载荷,读取环境变量并外传密钥。外传内容包含静态的 NEKO_ADMIN_PASSWORD,研究者据此登录受害者的 NEKO 远程桌面,并通过 file:///etc/hostname 比对确认是同一台机器。该注入是持久化的,会在受害者每次执行任务时触发,所有者还可随时静默替换载荷。研究者在 5 月 9 日至 10 日通过四次独立运行确认,经 Meta 漏洞赏金项目报告,9 月 16 日修复。

    1 条报道 · 1 个来源查看事件时间线与全部报道
  9. noma.security · 收录 · 原文 日期未知41

    Noma Labs 披露 GitLost:用 GitHub Issue 提示注入让 AI Agent 泄露私有仓库

    Noma Labs 发现 GitHub Agentic Workflows 存在间接提示注入漏洞 GitLost,未认证攻击者只需在组织内公开仓库提交一个构造好的 Issue,即可让 AI Agent 读取并公开评论出私有仓库内容。该工作流由 GitHub Actions 与 Claude 或 GitHub Copilot 驱动的 Agent 组成,触发条件为 issues.assigned,Agent 会读取 Issue 标题与正文、调用 add-comment 工具,并拥有组织内公开与私有仓库的读权限。攻击者无需任何代码能力或凭据,Noma Labs 用伪装成销售副总裁客户跟进请求的 Issue 完成了验证,泄露了公开仓库 poc 与私有仓库 testlocal 的 README.md 内容。

  10. pluto.security · 收录 · 原文 日期未知42

    Pluto Security 发现 179 个暴露在公网的 MCP 服务器,147 个无需认证

    Pluto Security 在数周内确认 179 个可公开访问的 MCP 服务器,其中 147 个(82%)经直接调用工具验证确实无需任何登录、token 或会话校验,140 个目前仍在线可达。严重度人工评估为 26 个 critical、19 个 high、24 个 medium、110 个 low;按暴露工具能力划分,57 个可写入或改变状态、43 个只读、23 个涉及金融与商业、7 个可执行完整代码。作者指出根因是 tools/list 发现调用在多数实现中默认不认证,且工具描述本身不构成攻击面提示,建议对 tools/call 而非传输层做认证、扫描外部攻击面中的 MCP 指纹、并按工具而非按服务器授权。

  11. Salt Security · 收录 · 原文 日期未知41

    Salt Labs 用一封邮件劫持 Manus 智能体并获取沙箱内 OAuth token

    Salt Labs 发现 Manus 的 Gmail 集成可被一封普通邮件劫持:邮件中隐藏的指令被 Manus 当作可执行内容处理,最终在用户云沙箱内实现远程代码执行。研究者先用直接指令和 Base64 编码测试,均被 Manus 的安全机制拦截;改用 JSFuck 混淆的 JavaScript 载荷后,Manus 调用 Node.js 解码并执行,成功拿到反向 shell。进入沙箱后,研究者发现环境变量中存有受害者的 Gmail OAuth token,以及 Google Drive、GitHub 等已连接服务的凭据,攻击可扩展到这些第三方服务。Manus 的护栏在代码执行之后才弹出警告并要求用户批准,检测与拦截之间存在时间差。该漏洞已修复,不再可利用,研究者通过 Meta 的漏洞赏金计划提交了披露报告。

  12. 论文追踪 · 收录 · 原文 论文53

    ReGap:无需真实隐私数据即可通过微调重新提取模型隐私关联

    研究者提出 ReGap,一种无需真实隐私监督的微调恢复攻击,用目标模型自身生成的候选答案构造监督数据,再按答案 token 似然筛选并训练新的 LoRA 适配器。在 GPT-2 Small/Medium/Large、OPT-1.3B 和 Qwen3-1.7B/4B 六个设置上,一轮 ReGap 使目标关联恢复率比微调后模型提升 6 至 21 个百分点,GPT-2 Medium 从 42% 升至 63%,GPT-2 Large 从 55% 升至 72%。在适配身份与所有记忆及评测身份完全不重叠、生成候选池和选中样本中均无精确目标答案的对照下,GPT-2 Medium 和 Large 仍分别提升 15.3 和 14.0 个百分点。同一适配器只在曾接触过目标的检查点上带来提升,在未接触目标的匹配检查点上无增益,说明恢复依赖此前的目标暴露。该效果在随机绑定结构和 NPO 遗忘处理后明显减弱。

    推荐理由论文给出无需真实隐私监督即可重新提取模型已学隐私关联的微调方法,并附跨模型成功率与失效边界。

  13. The Hacker News · 收录 · 原文 57

    恶意 MCP 服务器可拆分指令,诱导编码 Agent 外泄密钥

    ASSET Research Group 披露 GhostSplice:恶意 MCP 服务器将注入内容分散在工具描述和返回结果等上下文中,编码 Agent 可能把这些内容组合为操作要求,进而泄露可读取的数据。报道所述测试在隔离环境中使用假凭证,属于受控实验,不能据此认定发生真实入侵或推断所有模型和客户端均受影响。攻击前提是开发者已接入攻击者控制的 MCP 服务器,且 Agent 原有权限允许读取目标文件。研究者建议限制工具权限,核验跨工具数据流,并将服务器输出作为不可信数据处理;截至报道所述时间,该问题尚无公开 CVE 编号。

    推荐理由披露了恶意 MCP 服务器把窃取指令拆成片段绕过拒答的机制与跨模型测试数据,可对照检查自家编码 Agent 的工具权限与输出流向。

  14. 论文追踪 · 收录 · 原文 论文53

    研究者提出 IMMRAG 攻击,可从多模态 RAG 数据存储中提取医学与文档图像

    研究者提出 IMMRAG,一种在黑盒设置下针对图像返回式多模态 RAG 的自动化数据提取攻击。该方法把恶意指令嵌入用户提供的输入图像,而非放在文本提示词中,每次查询将攻击者持有的影子图像与已从系统中恢复的图像混合,并用相关性加权重采样把后续查询导向仍能返回新结果的嵌入空间区域。在医学助手、文档助手和通用工具三类场景中,单次 2500 次查询的运行按局部特征匹配分别重建出最多 611 张放射学图像、566 份文档扫描件和 416 张通用图像,不同数据存储条目数最高为非自适应基线的 5.6 倍。实验覆盖多个 CLIP 系列检索器和多种生成器,作者据此指出需要针对多模态数据设计专门防护。

  15. 论文追踪 · 收录 · 原文 论文48

    OverAct:衡量并缓解 LLM 工具调用智能体的主动越权取数

    研究者提出 OverAct 基准,用于衡量结构化工具调用 LLM 智能体在用户请求之外主动获取更多信息的行为,并将其命名为主动越权(proactive over-authorization)。该基准覆盖八个隐私敏感领域,采用确定性、无需评判模型的打分方式,并配套一个决策论解释框架,给出三条可检验预测。在来自四个模型族的七个模型上,所有模型都显著超出授权范围;请求具体性是严重程度的最强预测因素,越权程度随工具池规模呈次线性增长,解码温度影响很小,这些模式与成本不对称解释一致。作者还提出零样本推理时方法 SelfAudit,通过生成基于请求的论证并在执行前过滤无依据的调用,在无 oracle 知识的情况下将隐私相关越权减少 43%,消融显示显式过滤是范围缩减的主要来源。

10月4日周日
  1. 论文追踪 · 收录 · 原文 论文53

    SigLeak 可从执行轨迹推断专有 Agent 技能,平均提升成功率 6.88 个百分点

    研究者提出 SigLeak,一个仅凭公开任务描述和黑盒交互就能从执行轨迹中推断专有 Agent 技能内容的框架,并将这一威胁形式化为 Skill Leakage。方法分两阶段:先用诊断任务构造生成多样且决策密集的探针,再对比同一探针在启用与禁用目标技能下的配对轨迹,提取可复现的技能签名并迭代精炼重建结果,全程不需要参考答案或轨迹级正确性标注。在五个场景、三个模型家族和三个 Agent 框架上,SigLeak 在几乎所有设置中取得最佳或并列最佳的下游成功率,平均比禁用技能的基线高 6.88 个百分点,细粒度 SkillSim 的 F1 与召回率也最高。在 SkillGuard5 提示防御下,提示窃取基线 BBS 的细粒度召回与 F1 为零,而 SigLeak 仍能恢复目标技能内容。作者指出,隐藏技能文件并不能隐藏其行为影响,需要在不牺牲执行可见性的前提下设计针对行为推断的防御。

    推荐理由论文把专有 Agent 技能被行为轨迹反推的风险形式化,并给出可复现的黑盒推断流程与跨模型评测结果。

  2. 论文追踪 · 收录 · 原文 论文49

    论文指出密码学模型认证的假设缺口:审计通过但部署失效

    论文《Certified in Theory, Broken in Practice》指出,基于安全零知识证明(ZKP)的密码学模型认证(CMC)方案存在假设缺口:现有安全定义只保证模型在固定审计数据集上的行为,未保证同一分布的其他数据上同样成立。作者据此构造攻击,通过精心设计训练数据,使模型在审计中表现正常、部署后出现病态行为,实验显示攻击者可认证模型在审计集上准确率超过99%,而在同分布新样本上不足30%。为弥补该缺口,作者形式化了面向 CMC 框架的密码学安全定义,提出通用协议模板并证明其满足这些要求。作者认为该结果既是对现有方案的警示,也为设计安全、隐私保护的机器学习审计协议提供了建设性指引。

  3. 论文追踪 · 收录 · 原文 论文56

    研究揭示 split-LLM 训练中返回梯度泄露真实行,前向隐私门仍通过

    研究者对两节点 split-LLM 训练系统做安全案例研究,发现被评估为通过隐私门的前向通道之外,返回的输出梯度存在未被测试的泄露通道。可信本地节点持有私有损失并回传输出梯度,由于损失在 decoy 行之前截断,decoy 行的梯度恒为零,零支撑模式直接暴露哪些行是真实行。在九个随机种子上,每次运行的 4,096 个帧都被准确区分出真实行,行级一致率为 1.000。基于该结构信号的内容探测相对常量基线多恢复约每百 token 一个 token,提升 +0.65 至 +1.50 个百分点,而打乱标签的对照未恢复任何信息。在通过前向隐私门与质量门的四层浅分割配置上,联合视图仍突破预设的 +1.0 个百分点门限。

    推荐理由论文给出一种被前向隐私门漏掉的梯度通道泄露,并附可复现的校准协议与缓解成本,适合做隐私评测的团队参考。

  4. 论文追踪 · 收录 · 原文 论文67

    研究者利用加密推理块跨模型兼容性窃取专有 LLM 推理链

    研究者发现 Anthropic、OpenAI、Google 的 API 把思维链以加密块形式交给客户端回传,这些加密块在同一厂商生态内可跨会话、跨用户、跨模型复用。他们把强模型的加密推理块注入同厂商较弱、防护较松的模型(如 Claude Haiku 4.5、GPT-5.6 Luna、Gemini Robotics 1.6),迫使其逐字转写明文,从而在不直接越狱强模型的情况下提取其推理链。该漏洞衍生四类攻击:绕过反蒸馏机制窃取专有推理、从公开会话日志中大规模提取隐私数据、通过隐藏推理通道获取有害信息、以及在加密块中植入不可见的提示注入。研究者在 GitHub 和 Hugging Face 抓取 6,708 条公开 Agent 轨迹,解码出 315,320 条推理链,恢复 367 项 PII 和 182 项凭据,其中真实用户会话包含 62 个 API key、33 个密码和 30 个邮箱。

    推荐理由论文披露加密推理块可跨会话、跨用户、跨模型复用,并给出对 Anthropic、OpenAI、Google 三家 API 的实测结果与缓解建议。

10月3日周六
  1. 论文追踪 · 收录 · 原文 论文49

    GraphProfiler 用个人知识图谱推断敏感属性并溯源到具体帖子

    研究者提出 GraphProfiler,一种可审计的 LLM 画像方法,将用户发帖历史表示为带来源链接的个人知识图谱,节点和边可回溯到原始帖子,属性预测可引用图谱记录和源文本。在八属性的 SynthPAI 基准上攻击成功率达 86.7%,与纯文本强基线相差不到两个百分点,在 PANDORA 上为 84.6%,超过 98% 的预测附有支持证据。消融实验显示,移除被引用的帖子比移除同等数量的随机帖子更能降低攻击成功率,说明这些帖子确实贡献了推断结果。该工作已被 EMNLP 2026 主会接收。

  2. 论文追踪 · 收录 · 原文 论文50

    研究揭示训练效率与模型脆弱性的权衡:高效训练更易受对抗与隐私攻击

    Yiyong Liu、Jun Sakuma、Michael Backes、Rui Wen 的论文对训练效率与模型脆弱性的权衡做了跨领域系统研究,覆盖视觉与语言模型。结果显示,采用选择性数据采样、高效预训练和简化强化学习流程等效率导向策略的模型,对对抗攻击和隐私攻击的易感性上升。作者通过分析模型内部几何与功能表征发现,高效变体一致表现出更尖锐的损失几何以及表征结构的系统性变化。研究还扩展到零 RL 训练,发现用简化 RL 流程训练的模型比常规对齐流程训练的模型更容易出现灾难性遗忘和过度自信。作者据此认为训练效率并非免费午餐,并呼吁转向同时优化性能、成本与安全的多目标训练。

  3. 论文追踪 · 收录 · 原文 论文54

    研究实测五套 Agent 记忆系统均不执行撤销标记

    研究者对 Graphiti、Zep(两者共用同一引擎)、mem0、langmem 和 cognee 五套采用软撤销的 Agent 记忆系统做实证测量,发现没有系统默认执行撤销:被标记为无效的事实仍可能在检索时返回,导致 Agent 选择不安全动作。实验覆盖九个策略场景、六个厂商的九个模型,每个试验在六种防御条件下评分。五套系统中有两套会同时返回撤销记录和替代记录,这两套在所有场景中都把撤销记录排在当前记录之前,并在超过五分之二的试验中让 Agent 选了不安全动作。作者据此开发了一个位于 Agent 与记忆后端之间的护栏,在读取时检查记录有效性,扣留已撤销或与替代版本冲突的记录,并在相同系统与模型上验证其效果,代码已开源。

    推荐理由论文实测五套 Agent 记忆系统在检索时均不执行撤销标记,并给出一个可复现的检索层护栏设计。