察元AI教程库 · 文章 · 微调

基于强化学习的大型语言模型微调倾向于偏向可提取的特征

许多强大的大型语言模型（LLMs）是通过自监督预训练，然后通过基于人类或AI反馈的强化学习微调阶段开发的。在这一阶段，模型可能会受到归纳偏置的引导，依赖于更简单的特征，这些特征可能更容易

作者:Diogo Cruz, Edoardo Pona, Alex Holness-Tofts · 语言:en

简介