察元AI教程库 · 文章 · 大模型

RLAR:一种用于大语言模型多任务强化学习的代理奖励系统

通过强化学习进行大语言模型对齐严重依赖于奖励函数的质量。然而,静态的、领域特定的奖励模型通常训练成本高昂,并且在强化学习迭代过程中遇到的分布外场景中表现出较差的泛化能力。我们提出了RLAR(Reinforcement Learning Alignment with Reward)方法

作者:Andrew Zhuoer Feng, Cunxiang Wang, Bosi Wen · 语言:en

前往原址学习

简介

通过强化学习进行大语言模型对齐严重依赖于奖励函数的质量。然而,静态的、领域特定的奖励模型通常训练成本高昂,并且在强化学习迭代过程中遇到的分布外场景中表现出较差的泛化能力。我们提出了RLAR(Reinforcement Learning Alignment with Reward)方法

返回教程库 · 察元AI产品家族