跳到正文

儿童、青少年与心理健康 · News

10月14日 · 周三

儿童、青少年与心理健康 · News

按原发与事件进展排列
10月9日周五
  1. arXiv:危险能力与安全评测、Scale AI Research Blog 等 3 个来源arXiv:危险能力与安全评测 等 3 个来源 · 3篇报道 · 62

    Scale AI发布DistressBench危机对话评测基准

    Scale AI 等机构的研究者发布 DistressBench,一个由执业临床医生和危机顾问撰写、涵盖 718 段英文自杀与自伤危机对话的危机支持评测基准,覆盖 23 个自杀与自伤子类别和七个支持维度,共 6,901 条加权标准。研究评测 25 个前沿模型,最佳模型满足 88.4% 的加权标准,中位数模型为 71.4%,临床医生参考回答为 98.7%。作者报告主要失败不是有害输出,而是识别危机后不采取行动。

10月7日周三
  1. The Verge AI、Common Sense Media / Youth AI Safety Institute 等 8 个来源The Verge AI 等 8 个来源 · 8篇报道 · 58

    Common Sense Media 评 ChatGPT 青少年版风险不可接受

    Common Sense Media 旗下 Youth AI Safety Institute 将 OpenAI 的 ChatGPT for Teens 评为对 18 岁以下用户的“不可接受风险”,呼吁在修复安全与学习保护缺口前限制为 18 岁以上使用,OpenAI 对该结论提出异议。研究所在产品上线前后用注册为 13 至 17 岁的账号运行 4000 多条提示,并由儿童精神科医生和儿科医生审阅回复。核心发现是家长安全通知失效:十多个与家长账号关联的新青少年账号在涉及自杀、自残和饮食失调的明确对话中始终未触发通知,990 条上线前提示和 450 条上线后提示中仅触发 4 次家长通知。超过四分之一本应给出危机转介的情境未把用户引向专业帮助;近 2000 条提示测试中仅遇到两次休息提醒,且都出现在约 90 分钟的单次对话里;当风险来自青少年与 ChatGPT 自身的关系时,模型很少引导其求助成年人,而风险来自他人时这一比例为 94%。

    事件进展
    1. Common Sense Media 称 ChatGPT for Teens 风险不可接受

    2. Futurism报道ChatGPT青少年安全报告

9月29日周二
  1. POLITICO · 32

    AI 心理健康测试:OpenAI 发布 MentalHealthBench,FDA 制定 AI 治疗工具基准政策

    OpenAI 上周发布 MentalHealthBench,用于评估聊天机器人在心理健康场景下的回应;FDA 也已制定针对 AI 治疗工具的基准政策。这类基准测试通常由人类评估者模拟用户心理困扰情境与聊天机器人对话,场景涵盖自杀意念、饮食障碍和人际关系问题。Vals AI 的 Andrea Mock 指出,心理健康评估远比"数学题是否解对"这类可验证任务复杂,需要观察长期影响。RAND 的 Jonathan H. Cantor 正在研究如何用这些评估跨时间比较模型表现,但不同心理治疗框架对"正确回应"的定义不同,使统一标准难以建立。

9月23日周三
8月12日周三
  1. Vals AI · 27

    Vals AI 启动儿童与青少年 AI 心理健康安全评估

    Vals AI 宣布启动面向儿童和青少年的 AI 心理健康安全评估新方向,与临床医生和学术研究者合作开发独立评测。评估聚焦三类风险:自伤与危机情境、模型冒充医生或治疗师等不当权威、不健康的情感依恋与依赖。初步对比发现,所有模型都能识别明确的自杀披露,但后续回应差异显著,部分仅给出模糊转介;在药物教育、症状解读等看似普通的问题中,风险会随对话逐步累积。

8月7日周五
  1. AI Security Institute (AISI) · 41

    AISI 与牛津、UCL 在 Nature Medicine 发布 SIM-VAIL 框架,用于压力测试 AI 聊天机器人对脆弱用户的回应

    AISI 与牛津大学、UCL 的研究者在 Nature Medicine 发表论文,构建了 SIM-VAIL,一个经临床验证的框架,用于压力测试 AI 聊天机器人在心理健康对话中如何回应脆弱用户。该框架帮助研究者发现弱点并测试更安全的设计。论文链接为 https://www.nature.com/articles/s41591-026-04577-2。

2025年11月12日周三
  1. OpenAI · 52

    GPT-5.1 Instant 与 GPT-5.1 Thinking System Card 增补

    OpenAI 发布 GPT-5 System Card 增补,给出 GPT-5.1 Instant 与 GPT-5.1 Thinking 的更新安全指标,并新增心理健康与情感依赖方面的评测。该增补是 GPT-5 System Card 的补充文件。

日期待核
  1. Transluce · 61

    Transluce 发布心理健康评测:模拟 5 万余段危机对话,测试 77 个模型变体

    Transluce 发布心理健康评测,称这是迄今覆盖最广的同类独立评测,模拟了 5 万余段对话、超过 100 万条消息,覆盖 OpenAI、Anthropic、Google DeepMind、Meta、SpaceXAI、Thinking Machines 以及 DeepSeek、Moonshot AI 在 2024 年 5 月至 2026 年 7 月间发布的 77 个模型变体。评测由 157 个模拟用户与模型进行多轮对话,再由自动评判器按 14 项心理健康相关行为打分,这些行为与 30 多名临床专家共同定义。结果显示,通过 API 测试时,较新模型明显比 GPT-4o、Gemini 2.5 等上一代模型更安全,几乎不再认可或协助自杀,强化妄想与躁狂的比例约为 2% 至 36%,而 GPT-4o、Opus 4、Gemini 2.5 为 69% 至 82%。

已经到底了