察元AI教程库 · 文章 · 大模型
InfoPO:基于互信息最大化用于大型语言模型对齐
我们研究了使用人类偏好数据进行大型语言模型(LLMs)的后训练。最近,直接偏好优化及其变体在对齐语言模型方面表现出巨大潜力,无需奖励模型和在线采样。尽管这些方法有诸多优势,但
作者:Teng Xiao, Zhen Ge, Sujay Sanghavi · 语言:en
前往原址学习
简介
我们研究了使用人类偏好数据进行大型语言模型(LLMs)的后训练。最近,直接偏好优化及其变体在对齐语言模型方面表现出巨大潜力,无需奖励模型和在线采样。尽管这些方法有诸多优势,但
返回教程库 · 察元AI产品家族