事件观察中
研究:图像缩放改变视觉提示注入效果
先了解这件事
AI 综述
2026年11月12日发布的 arXiv 论文提出视觉提示注入中的尺度诱导语义偏移(SISS):图像在被视觉语言模型解读前经缩放或压缩时,隐藏文本指令的可读性会随之改变。在其评估协议下,512×512 呈现分辨率时不可恢复,激进降采样后变为可恢复。研究者用双尺度验证、选择性自强化、浅层低秩适配与像素空间噪声正则组成闭环黑盒框架,在固定 300 例基准上经第三轮精炼,对四个闭源视觉语言模型取得 58.75% 平均攻击成功率,高于最强生成基线的 41.08%。受控扫描显示效应集中于激进压缩,128×128、224×224、336×336 下平均成功率分别降至 17.68%、6.85% 和 5.60%。下游网页智能体实验中,生成图像提高了隐藏指令感知,但实际行为被攻陷约 4%。
AI 根据报道生成 · 2 天前更新
走势与进展
每小时关注度
现在 36,24 小时 -1%·峰值 39(11月13日 18:00)
11月14日11月15日现在 36
相关研究
这件事的论文
- 针对 VLM 与网页智能体的视觉提示注入中的尺度诱导语义偏移
arXiv · 2026-11-12 · 深度解读
后续时间线
11月12日
- arXiv:越狱、提示注入、投毒与防御针对 VLM 与网页智能体的视觉提示注入中的尺度诱导语义偏移
研究者提出视觉提示注入中的尺度诱导语义偏移(SISS),图像在被视觉语言模型解读前经缩放或压缩时,隐藏文本指令的可读性会随之改变,在其评估协议下 512×512 呈现分辨率时不可恢复、激进降采样后变为可恢复。其结合双尺度验证、选择性自强化、浅层低秩适配与像素空间噪声正则的闭环黑盒框架,在固定 300 例基准上经第三轮精炼对四个闭源视觉语言模型取得 58.75% 平均攻击成功率,高于最强生成基线的 41.08%。受控扫描显示效应集中于激进压缩,128×128、224×224、336×336 下平均成功率分别降至 17.68%、6.85% 和 5.60%。下游网页智能体实验中,生成图像提高了隐藏指令感知,但实际行为被攻陷约 4%。
相关讨论
关注度走势
每天新增来源
- 11月13日新增1个来源(1家媒体、0个账号)
- 11月14日新增0个来源(0家媒体、0个账号)
- 11月15日新增0个来源(0家媒体、0个账号)