研究揭示 split-LLM 训练中返回梯度泄露真实行，前向隐私门仍通过
Privacy Failure in Split-LLM Training, The Returned Gradient Nullifies the Decoys
AI 导读
研究者对两节点 split-LLM 训练系统做安全案例研究，发现被评估为通过隐私门的前向通道之外，返回的输出梯度存在未被测试的泄露通道。可信本地节点持有私有损失并回传输出梯度，由于损失在 decoy 行之前截断，decoy 行的梯度恒为零，零支撑模式直接暴露哪些行是真实行。在九个随机种子上，每次运行的 4,096 个帧都被准确区分出真实行，行级一致率为 1.000。基于该结构信号的内容探测相对常量基线多恢复约每百 token 一个 token，提升 +0.65 至 +1.50 个百分点，而打乱标签的对照未恢复任何信息。在通过前向隐私门与质量门的四层浅分割配置上，联合视图仍突破预设的 +1.0 个百分点门限。
推荐理由
论文给出一种被前向隐私门漏掉的梯度通道泄露，并附可复现的校准协议与缓解成本，适合做隐私评测的团队参考。