察元AI教程库 · 文章 · 微调

MML：最大多宇宙学习用于语言模型的稳健微调

最新的先进语言模型采用两阶段训练流程，包括（i）在无标签文本上进行无监督预训练，以及（ii）针对特定监督任务进行微调。近年来，许多研究致力于通过改进预训练阶段来提升这些模型

作者:Itzik Malkiel, Lior Wolf · 语言:en

前往原址学习

简介

最新的先进语言模型采用两阶段训练流程，包括（i）在无标签文本上进行无监督预训练，以及（ii）针对特定监督任务进行微调。近年来，许多研究致力于通过改进预训练阶段来提升这些模型

返回教程库 · 察元AI产品家族