NutVLM:抵御全维度攻击的自动驾驶视觉语言模型自适应防御框架
NutVLM: A Self-Adaptive Defense Framework against Full-Dimension Attacks for Vision Language Models in Autonomous Driving
AI 导读
NutVLM 是面向自动驾驶视觉语言模型、抵御全维度攻击的自适应防御框架,在 Dolphins 基准上指标提升 4.89%。其 NutNet++ 哨兵三分类识别良性样本、局部补丁与全局扰动:局部威胁经灰度掩码净化,全局扰动触发 EAPT 生成纠正性驾驶提示词,无需全模型微调。准确率、语言得分与 GPT 得分均获提升。