跳到正文
原文
arXiv· arXiv:2609.00873· Shengfang Zhai·· 2026-09-01

研究提出 Q-Skew:利用 token 级记忆不对称对微调扩散语言模型做成员推断

Membership Inference in Fine-tuned Diffusion Language Models via Token-level Memorization Asymmetry

AI 导读

研究者在微调扩散语言模型(DLM)上提出成员推断方法 Q-Skew,一种基于分位数加权偏度的指标,其依据是通过理论分析发现的 token 级记忆不对称现象。在多个微调数据集和模型上的实验显示,该方法优于现有基线。作者进一步表明 Q-Skew 还能用于 PII 提取等其他隐私侵犯场景,认为扩散语言模型存在此前未被充分探索的隐私攻击面,需要系统性的隐私评估。该论文共 18 页,已被 EMNLP 2026(Findings)收录。

阅读原文arxiv.org