察元AI教程库 · 文章 · 大模型

通过自奖励对比式提示蒸馏实现大语言模型的直接对齐

在没有人类标注偏好数据的情况下,将大型语言模型(LLMs)与人类期望对齐是一个重要问题。本文提出了一种方法,通过使用对比提示对下响应对的输出概率来评估响应偏好,这可以

作者:Aiwei Liu, Haoping Bai, Zhiyun Lu · 语言:en

前往原址学习

简介

在没有人类标注偏好数据的情况下,将大型语言模型(LLMs)与人类期望对齐是一个重要问题。本文提出了一种方法,通过使用对比提示对下响应对的输出概率来评估响应偏好,这可以

返回教程库 · 察元AI产品家族