全部动态
从来源,看到研究的联系
点选节点,展开一条线索
本页材料
完整标题与摘要 · 4 条- 动态中国网信网
网信办通报清朗专项行动第二阶段AI技术滥用治理情况
中央网信办通报“清朗·整治AI应用乱象”专项行动第二阶段进展,聚焦AI制作虚假信息、传播暴力低俗内容、假冒仿冒他人、侵害未成年人权益等问题,累计清理违法违规信息561万余条,查处账号4.9万余个,处置违规网站、应用程序等2400余个。各地网信部门推出针对性措施,北京指导平台升级审核策略,上海推出AI应用“知识普及包”,浙江开展“一企一策”合规指导,广东对多款应用点对点督促整改。抖音、快手、微博、腾讯、百度等平台优化多模态识别模型并动态扩充人脸库、声纹库和违规样本库,豆包、元宝、千问、文心一言等严把原始语料审核并强化AI生成合成内容标识,华为、小米、OPPO、vivo等应用商店加强APP准入与抽检。
- 论文论文追踪
自生成文本识别微调可预防和逆转涌现性失准
研究者提出自生成文本识别(SGTR)微调,作为针对模型角色特征的干预手段,用于预防和逆转涌现性失准(EM)。实验在 GPT-4.1、Qwen2.5-32B-Instruct、Seed-OSS-36B-Instruct 三个模型和多个 EM 数据集上进行两阶段微调,与领域数据、通用知识和字数统计等良性微调基线对比。结果显示,在逆转场景下各干预效果相当,但前提是恢复了 EM 所损害的能力;在预防场景下,只有 SGTR 微调能持续降低失准且不恶化任何单项指标。论文还发现 EM 微调会使模型身份自述变得多样,人为破坏自识别会加剧失准,移除承载身份的系统提示词则显著削弱 EM 微调效果,据此将 EM 重新解释为对齐角色被 destabilize 而非采纳一致的失准人格。
- 论文论文追踪
研究评测 DeepSeek、Qwen、豆包在中文事实问题上的谄媚行为
一项研究评测了 DeepSeek、Qwen 和豆包三个中文大语言模型在事实性问题上的谄媚行为,覆盖 12,165 个来自真实中文搜索查询的是非判断题,共 364,941 条回答。研究在基线、用户信念条件和反谄媚提示三种设置下,对比模型开启与关闭推理时的表现,追踪正确答案、错误答案与不确定回答之间的配对迁移。结果显示,在用户持有错误信念时,模型既会出现与信念一致的错误,也会出现原本正确回答转为不确定的事实信心流失;推理并非稳定的防护手段,反谄媚指令虽能减少错误认同,却会推高不确定回答的比例。作者据此指出,在中文事实问答中避免附和错误信念并不等于保住事实准确性,转变层面的评测更有价值。
- 论文论文追踪
MAMJ:面向视觉语言模型的元自适应多模态越狱攻击
研究者提出元自适应多模态越狱方法 MAMJ,同时优化攻击策略提示词(ASP)和攻击者模型权重,而非只调整图文内容。该方法先用基于 LLM 的批评模型迭代改进 ASP,再用分组聚合的攻击成功率(ASR)作为奖励更新攻击者权重。在 MM-SafetyBench 上,MAMJ 对 GPT-4o、Gemini-3-Pro-Preview 和 Seed 2.0 的 ASR 分别为 81.0%、78.9% 和 82.3%,比最强的样本级基线最高高出 24.1 个百分点。学到的攻击者无需重新训练即可迁移到未见过的受害模型,并在代表性防御下仍然有效。论文已被 EMNLP 2026 主会接收,代码已公开。