察元AI教程库 · 文章 · 微调

偏好导向的监督微调：优先考虑目标模型而非对齐的大型语言模型

对预训练大型语言模型（LLM）进行对齐，使其具备遵循指令的能力，对于其实际应用至关重要。传统的监督微调（SFT）方法通常将其形式化为因果语言建模，通常采用交叉熵目标，需要大量

作者:Yuchen Fan, Yuzhong Hong, Qiushi Wang · 语言:en

前往原址学习

简介

对预训练大型语言模型（LLM）进行对齐，使其具备遵循指令的能力，对于其实际应用至关重要。传统的监督微调（SFT）方法通常将其形式化为因果语言建模，通常采用交叉熵目标，需要大量

返回教程库 · 察元AI产品家族