RL-ARC:用推理引导的不确定性校准大型推理模型
提出 RL-ARC,用推理置信度在强化学习中校准推理模型
- arXiv
- 2610.11352
- Published
- Setting
- Models and APIs
- Evaluated models
- Qwen2.5-7B, Qwen3-8B, Llama-8B distilled from DeepSeek-R1
- DefensesModel hardening
- ComponentReasoning chains
AbstractRL-ARC 用推理置信度调节答案置信度,作者称可少牺牲精度并改善 ID 与 OOD 校准。
RL-ARC 是校准感知的强化学习框架,用推理过程的口头置信度调节答案置信度。