察元AI教程库 · 文章 · 大模型
SR-GRPO:稳定秩作为大型语言模型对齐的内在几何奖励
通常通过外部监督来对齐大语言模型(LLMs)与人类偏好,但面临关键限制:人类标注稀缺且主观,奖励模型易受奖励黑客攻击,自我评估方法则受到提示敏感性和偏见的影响。
作者:Yixuan Tang, Yi Yang · 语言:en
前往原址学习
简介
通常通过外部监督来对齐大语言模型(LLMs)与人类偏好,但面临关键限制:人类标注稀缺且主观,奖励模型易受奖励黑客攻击,自我评估方法则受到提示敏感性和偏见的影响。
返回教程库 · 察元AI产品家族