研究者提出针对微调 TTS 模型的黑盒成员推断攻击
Hearing the Whispers: Black-Box Membership Inference Attacks on Finetuned TTS Models
AI 导读
研究者提出首个同时面向说话人级和录音级的黑盒成员推断攻击框架,用于检测语音数据是否被用于微调 TTS 模型。在查询生成上,作者刻画了可行查询空间并提出可评分范围与记忆诱发两条准则,评估五种代表性查询后认定朗读(recitation)效果最强;在表征工程上,从嵌入模型提取多层级语音表征,并对生成音频与目标音频做时间对齐以实现细粒度比较。