察元AI教程库 · 文章 · 微调

重新思考中间任务微调为何有效

中间标注数据任务的补充训练(STILTs)是一种广泛应用的技术,它首先在中间任务上对预训练的语言模型进行微调,然后再在目标任务上进行微调。尽管STILTs能够进一步提升预训练语言模型的性能,

作者:Ting-Yun Chang, Chi-Jen Lu · 语言:en

前往原址学习

简介

中间标注数据任务的补充训练(STILTs)是一种广泛应用的技术,它首先在中间任务上对预训练的语言模型进行微调,然后再在目标任务上进行微调。尽管STILTs能够进一步提升预训练语言模型的性能,

返回教程库 · 察元AI产品家族