察元AI教程库 · 文章 · 微调

恢复对齐大型语言模型的校准:一种校准感知的微调方法

大型语言模型(LL )成功的关键技术之一是偏好对齐。然而,偏好对齐的一个显著副作用是校准能力下降:虽然预训练模型通常校准良好,但LLMs在与人类偏好对齐后往往变得校准不佳

作者:Jiancong Xiao, Bojian Hou, Zhanliang Wang · 语言:en

前往原址学习

简介

大型语言模型(LL )成功的关键技术之一是偏好对齐。然而,偏好对齐的一个显著副作用是校准能力下降:虽然预训练模型通常校准良好,但LLMs在与人类偏好对齐后往往变得校准不佳

返回教程库 · 察元AI产品家族