察元AI教程库 · 文章 · 微调

FisherSFT:使用信息增益实现的语言模型高效监督微调

监督微调(SFT)是适应大型语言模型(LLMs)到新领域的一种标准方法。本文通过选择训练样本的有信息子集来提高SFT的统计效率。具体而言,在固定的训练样本预算下,即确定了

作者:Rohan Deb, Kiran Thekumparampil, Kousha Kalantari · 语言:en

前往原址学习

简介

监督微调(SFT)是适应大型语言模型(LLMs)到新领域的一种标准方法。本文通过选择训练样本的有信息子集来提高SFT的统计效率。具体而言,在固定的训练样本预算下,即确定了

返回教程库 · 察元AI产品家族