Skip to content

Translation in progress Some entries still include text in the original language.

开源模型安全 · News

Oct 12 · Monday

开源模型安全 · News

Latest publications and developments
Oct 8Thu
  1. The Jerusalem Post, Quartz · 6 sourcesThe Jerusalem Post · 6 sources · 6 reports · 58

    Iranian, Chinese and Israeli companies accused of using AI agents to run influence operations

    A New York Times investigation shows that China, Iran, and two private Israeli companies used downloadable modified Chinese open-source AI models to create AI agents that autonomously registered fake accounts in bulk on Instagram, Facebook, X/Twitter and TikTok and posted disinformation on politics and current events. U.S. officials said this is the first time AI agents built on Chinese-made models have been used to cover the full pipeline of an influence operation, from account creation to coordinated messaging; the open-source models were modified by developers to bypass the platforms' identity verification and anti-manipulation guardrails. Investigators determined that the Chinese and Iranian operations had government support, while the two Israeli operations were linked to private companies.

    Latest developments
    1. OpenAI封禁俄伊虚假阵线影响行动账号

    2. 伊朗、中国和以色列公司社交媒体上开展首批AI代理影响行动

Oct 6Tue
  1. GitHub 安全公告GitHub 安全公告 · 46

    vLLM 音频处理器缓存内存耗尽漏洞

    vLLM 披露 MOSS-Audio 音频处理器缓存内存耗尽漏洞:服务 MOSS-Audio 模型时,请求级处理器配置会进入无界缓存,重复不同配置或过大分配可使 API 进程内存耗尽或严重退化。可访问 /tokenize 的客户端即可触发,该端点不受 --api-key 的路由鉴权保护,因此 API key 本身不能替代外部访问控制。GitHub 公告标注受影响版本为 > 0.24.0, < 0.31.0,修复版本为 0.31.0。

Oct 2Fri
  1. X @MinLiBuildsX @MinLiBuilds · 14

    PewDiePie 蒸馏 OpenAI 输出训练本地模型被封号

    PewDiePie 发布本地模型 Ajax,基于 Qwen 3.5 9B 微调。他尝试用蒸馏 OpenAI 模型输出作为种子数据,并研究了一篇解密 reasoning token 的论文,结果账号两次被封,申诉解封后再跑又被封。

Sep 21Mon
  1. 纽约时报中文网 · 55

    伊朗、中国和以色列相关方被指用开源AI智能体开展影响力行动

    美国官员和安全研究人员称,近几个月伊朗、中国以及以色列境内某些组织利用中国开源AI模型创建可自主运行的智能体,在Instagram、Facebook、X和TikTok上批量开设虚假账户并散布政治虚假内容,把网络影响力行动的速度和规模提升到人工难以达到的程度。官员称这是中国模型支持的人工智能智能体首次被用于影响力行动的每个阶段,从创建虚假账户到协调信息发布,操作者多数情况下关闭了模型原有的安全防护。伊朗的国家支持行动冒充生活在美国大城市的普通美国人,在评论中标记记者和政治人士,传播网络梗和反共和党观点,近8万人关注了这些AI创建的账户,账户在今年上半年活跃。以色列方面,总部位于特拉维夫、由前NSO集团员工于2023年创立的IntelEye被指在今年夏天发起其中一宗行动,在四个平台创建数以千计账户并回复有关以色列下月全国选举的帖子。

You have reached the end