察元AI教程库 · 文章 · 微调

基于弱监督的预训练语言模型微调:一种对比正则化自训练方法

微调后的预训练语言模型(LMs)在许多自然语言处理(NLP)任务中取得了巨大成功,但在微调阶段仍需要大量标注数据。我们研究了仅使用弱监督进行预训练语言模型微调的问题,无需任何标注数据

作者:Yue Yu, Simiao Zuo, Haoming Jiang · 语言:en

前往原址学习

简介

微调后的预训练语言模型(LMs)在许多自然语言处理(NLP)任务中取得了巨大成功,但在微调阶段仍需要大量标注数据。我们研究了仅使用弱监督进行预训练语言模型微调的问题,无需任何标注数据

返回教程库 · 察元AI产品家族