察元AI教程库 · 文章 · 微调
重新思考中间任务微调为何有效
中间标注数据任务的补充训练(STILTs)是一种广泛应用的技术,它首先在中间任务上对预训练的语言模型进行微调,然后再在目标任务上进行微调。尽管STILTs能够进一步提升预训练语言模型的性能,
作者:Ting-Yun Chang, Chi-Jen Lu · 语言:en
前往原址学习
简介
中间标注数据任务的补充训练(STILTs)是一种广泛应用的技术,它首先在中间任务上对预训练的语言模型进行微调,然后再在目标任务上进行微调。尽管STILTs能够进一步提升预训练语言模型的性能,
返回教程库 · 察元AI产品家族