Skip to content

Translation in progress Some entries still include text in the original language.

#arXiv

No new updates indexed today yet

Page 20 Newer contentBack to latest

Sep 11Fri
Sep 10Thu
  1. Scale AI Research / SEAL · Indexed · Original News52

    Scale AI 提出 Rubric Dropout:用随机丢弃评分标准缓解 rubric-as-reward RL 中的奖励作弊(original, opens in a new tab)

    Scale AI 研究团队提出 Rubric Dropout,在每一步计算奖励前随机丢弃一部分评分标准,使策略无法长期依赖某一条标准进行奖励作弊。研究用 GRPO 在医学与科学 rubric 上训练 Qwen3-8B,训练评判模型的分数持续上升,而更强的 gold 评判模型显示质量在第 240 步达到峰值后下降,科学任务上 600 步内 gold 分数从峰值下跌 22 分。加入 30% 至 50% 的丢弃后,各匹配检查点的 gold 分数提升 2 至 7 分,8B 模型在医学上提升 1.0 和 2.0 分、科学上提升 6.4 和 7.0 分,训练奖励仍保持在 97% 至 98%。方法只需一行代码且不增加评判调用,安全相关的负面权重检查项被放入保护集不参与丢弃;两个完整 epoch 后差距未收窄,模型越小最优丢弃比例越低。

    Why it was selected提出用随机丢弃评分标准来抑制奖励作弊,并给出跨模型规模与领域的对照结果,适合关注 RL 训练稳定性的团队参考。

  2. arXiv:Agent 与 MCP 安全 · Indexed · Original Paper50

    DriftNet:双头轨迹 Transformer 检测并定位 LLM Agent 中的提示注入(original, opens in a new tab)

    Asif Pinjari 提出 DriftNet,一个双头轨迹 Transformer,读取已记录的工具调用轨迹并在一次前向中回答三个问题:轨迹是否被攻陷、攻击从哪一步进入、哪些步骤被劫持,第二个头为每一步打上 benign、injection point、hijacked 或 failed injection 四类标签。

Sep 9Wed
  1. arXiv:对齐、欺骗与监督 · Indexed · Original Paper27

    Privacy-Preserving Split Learning for Federated LLM Fine-Tuning(original, opens in a new tab)

    To address the problem that the autoregressive nature of LLMs in federated split learning causes intermediate activations to leak inputs and renders existing perturbation defenses ineffective, the researchers propose a learnable obfuscation–recovery scheme that protects participants' private datasets while still enabling the training of an independently deployable model on the server side.