察元AI教程库 · 文章 · 大模型

InfoPO:基于互信息最大化用于大型语言模型对齐

我们研究了使用人类偏好数据进行大型语言模型(LLMs)的后训练。最近,直接偏好优化及其变体在对齐语言模型方面表现出巨大潜力,无需奖励模型和在线采样。尽管这些方法有诸多优势,但

作者:Teng Xiao, Zhen Ge, Sujay Sanghavi · 语言:en

前往原址学习

简介

我们研究了使用人类偏好数据进行大型语言模型(LLMs)的后训练。最近,直接偏好优化及其变体在对齐语言模型方面表现出巨大潜力,无需奖励模型和在线采样。尽管这些方法有诸多优势,但

返回教程库 · 察元AI产品家族