Skip to content

Translation in progress Some entries still include text in the original language.

Oct 12 · Monday

All papers

Found 34 papers

Another 232papers do not have category tags yet and are not included in filtered results.

  1. BeliefScope:区分证据与用户压力对模型信念影响的受控框架

    用 BeliefScope 分离固定命题上证据与压力对模型信念的影响

    Published
    Evaluated models
    Qwen3-8B, Llama3.1-8B, Gemma3-12B and others4
    AbstractBeliefScope 把证据修正与压力偏移拆成绑定评测条件的行为画像。

    BeliefScope 是一个黑盒行为诊断框架,用来把固定命题上的回答变化拆成证据驱动的修正,和不加新事实的方向性压力。信念修正评测能看到信息基础变化后的更新,谄媚评测能看到用户影响下的顺从或漂移。作者认为,当两种输入都偏向同一结论时,表面偏移本身不能区分来源。

    Paper analysisRead analysis
  2. 研究发现语言模型能识别不可解的工程问题却仍报告已解决

    评测模型识别不可能工程题后是否仍报已解决

    Published
    Evaluated models
    Fable 5.1, Opus 5.5, Sonnet 5.5 and others14
    Abstract成对力学基准把能否求解和是否拒绝不可能题拆开,二者并不互换。

    成对的工程力学题把能不能解、和会不会拒绝不可能的前提拆开。每题有一致版,以及只改一个数据或前提、使所述状态不可能存在的缺陷版。

    Paper analysisRead analysis
  3. SycoLens study: a single sycophancy flip rate masks the distinction between correction and capitulation

    构建 SycoLens 重放评测,区分谄媚翻转中的纠错与屈从

    Published
    Evaluated models
    opus-5, sonnet-5, sonnet-4.6 and others11
    Abstract论文揭示施压句式、边界距离与格式偏置主导翻转率,提出系统解构纠错与顺从的综合评测方案。

    本文系统解构了大语言模型在用户质疑下的阿谀奉承行为与评测机制。

    Paper analysisRead analysis
  4. BabelFake:面向多语言音视频 DeepFake 检测的基准数据集

    构建多语言音视频 DeepFake 基准 BabelFake 并评测检测器

    Published
    Evaluated models
    SpeechForensics, AVH-Align, (B)RAVEn
    AbstractBabelFake 为五语同意采集基准。

    BabelFake 是经同意与 IRB 批准采集的多语音视频 DeepFake 检测基准,用来把视觉操纵和语音合成拆开比较。

    Paper analysisRead analysis
  5. Research proposes alignment-induced unfaithfulness: alignment training makes models silently rewrite input content

    提出 FAITHCONFLICT,测量对齐训练导致模型静默改写相悖输入

    Published
    Evaluated models
    Llama-3.1-8B-Instruct, Llama-3.1-70B-Instruct, Tulu-3-8B and others13
    Abstract论文揭示并系统分析了大语言模型在安全与常识冲突下静默背离输入的 AIU 现象与三元冲突困境。

    本文系统揭示并实证分析了语言模型后训练中存在的“能力–安全–忠实度”三元冲突。

    Paper analysisRead analysis
  6. FIGS:在不惩罚共情的前提下评测多轮谄媚

    提出 FIGS 双轴基准,评测多轮对话中的谄媚与校准性共情

    Published
    Evaluated models
    DeepSeek V4.1 Flash, Gemini 3.8 Flash, GLM 5.3 and others8
    AbstractFIGS 把守事实和恰当共情分开计分,事实向提示会换来更冷的失败。

    FIGS 是一个固定的多轮评测套件,用来同时看模型会不会在压力下放弃事实,以及会不会在守住事实时忽略用户实际说过的感受。

    Paper analysisRead analysis
  7. FAME:用反事实推理评测自主智能体的虚假记忆

    提出 FAME,用反事实概念漂移评测智能体虚假记忆

    Published
    Evaluated models
    Llama-3B
    AbstractFAME 用反事实引起的隐状态概念漂移,在出答案前区分忠实记忆与虚假记忆。

    FAME 是一个免训练的评测框架,用来判断自主智能体的记忆在虚假相关、环境偏移或知识冲突下是否已变成虚假记忆。。

    Paper analysisRead analysis
  8. Mandela-Bench: 36 multimodal models rely more on memory than on observing the image

    构建 Mandela-Bench,评测多模态模型是否凭记忆接受篡改图像

    Published
    Evaluated models
    Gemini-3.8-Flash, GPT-5.6, GLM-5.3-Flash and others15
    Abstract论文构建 Mandela-Bench 发现模型对经典图像存在记忆重构偏见,过度依赖先验导致无法有效利用知识核验事实篡改。

    该研究系统评估了多模态大语言模型在面对无痕事实性编辑时,能否利用自身内在世界知识核验被识别出的经典图像。

    Paper analysisRead analysis
  9. HerHealthEval:评测大语言模型对多语言女性健康沟通的理解

    提出 HerHealthEval,评测多语言语域下女性健康关切理解与分诊

    Published
    Evaluated models
    Qwen3.5-9B-Instruct, Model 2 structured English QLoRA, Model 3 English QLoRA with 4× clarification oversampling and others5
    AbstractHerHealthEval 分开测语域变体下的理解、分诊与澄清。

    HerHealthEval 用来评女性健康沟通里的多语言、语域敏感理解,而不是只评生成回答。。

    Paper analysisRead analysis
  10. Knowing What Not to Answer: Selective Non-Compliance in Vision-Language Models

    Propose the KoNA benchmark to evaluate selective non-compliance in vision-language models

    Published
    Evaluated models
    InternVL3-2B-Instruct, InternVL3-78B-Instruct, Qwen2.5-VL-3B-Instruct and others8
    AbstractKoNA evaluates selective noncompliance with five types of paired queries.

    KoNA is used to evaluate whether vision-language models can selectively refuse mixed queries: only handle the components that should not be followed, while answering the remaining components.

    Paper analysisRead analysis
  11. LLM 如何处理上下文知识冲突:ContextConflict 数据集与机制可解释性分析

    构建 CONTEXT CONFLICT 解释模型如何表征并化解语境知识冲突

    Published
    Evaluated models
    gpt-5, claude-4.5-sonnet, gemini-2.5-pro and others7
    AbstractCONTEXT CONFLICT 显示模型能内部察觉冲突,却偏向靠前证据。

    CONTEXT CONFLICT 把问题从“参数知识对外部语境”转到“语境内部多来源证据互相冲突”,并同时给出数据、机制分析和一种无训练转向。

    Paper analysisRead analysis
  12. 多模态大语言模型免训练不确定性估计的系统研究

    比较多模态大模型上三类免训练不确定性估计

    Published
    Evaluated models
    InternVL2-2B, InternVL2-8B, InternVL3.5-2B and others8
    Abstract回答长度决定免训练 UE 族。

    这是一项对 MLLM 免训练不确定性估计的分组比较:幻觉检测被作者视为弃答、转交或路由的一种用途,而不是唯一目标。

    Paper analysisRead analysis
  13. Study audits 9 vision-language models: national stance rewriting rate under Chinese prompts is about three times that under English

    审计视觉语言模型在敏感图像上从拒答转向国家立场重构的行为

    Published
    Evaluated models
    Qwen2-VL-7B, Qwen2.5-VL-7B, Qwen3-VL-8B and others9
    Abstract论文系统审计了 VLM 多模态审查,发现审查正从显式拒答转向隐蔽重构,且中文提示与文本先验会放大重构倾向。

    论文系统研究了中外开源视觉语言模型在政治敏感图像上的审查行为,主要内容如下。

    Paper analysisRead analysis