arXiv· arXiv:2409.02795· Bofei Gao, Feifan Song, Yibo Miao, Zefan Cai, Zhe Yang, Liang Chen, Helan Hu, Runxin Xu, Qingxiu Dong, Ce Zheng, Shanghaoran Quan, Wen Xiao, Ge Zhang, Daoguang Zan, Keming Lu, Bowen Yu, Dayiheng Liu, Zeyu Cui, Jian Yang, Lei Sha, Houfeng Wang, Zhifang Sui, Peiyi Wang, Tianyu Liu, Baobao Chang·本站收录· 原文发表 迈向大语言模型偏好学习的统一视角:综述
Towards a Unified View of Preference Learning for Large Language Models: A Survey
AI 导读
该综述将大语言模型偏好学习的现有对齐策略分解为模型、数据、反馈和算法四个组件,提出统一框架以建立不同方法间的联系。作者还给出主流算法的详细工作示例,并基于统一视角探讨使大语言模型与人类偏好对齐的挑战和未来研究方向。
阅读原文arxiv.org