Anti-Persona:破坏个性化视觉-语言模型中的未授权身份绑定与识别
Anti-Persona: Disrupting Unauthorized Identity Binding and Recognition in Personalized Vision--Language Models
AI 导读
Anti-Persona 是针对个性化视觉-语言模型(LVLM)的图像级防御,可阻断未授权身份绑定与识别,在两种代表性LVLM上保护率最高达95.0%。该方法将参考图像间共享的视觉特征聚合为身份原型,再优化视觉上细微的扰动以破坏编码器中的原型对齐。防护不依赖特定提示词,可抵御图像压缩,并在编码器不匹配时提升黑盒迁移。