察元AI教程库 · 文章 · 大模型

基于对比偏好优化的大型语言模型序列级训练

下一个标记预测损失是大型语言模型（LLMs）的主要自监督训练目标，在多种下游任务中取得了令人满意的结果。然而，深入研究该目标后，我们发现其缺乏对序列级信号的理解，导致

作者:Zhili Feng, Dhananjay Ram, Cole Hawkins · 语言:en

前往原址学习

简介

下一个标记预测损失是大型语言模型（LLMs）的主要自监督训练目标，在多种下游任务中取得了令人满意的结果。然而，深入研究该目标后，我们发现其缺乏对序列级信号的理解，导致

返回教程库 · 察元AI产品家族