察元AI教程库 · 文章 · 微调

利用嵌入来缓解小样本语言微调中的幻觉问题

少样本语言学习者能够从预训练模型中提取知识,以从少量标注句子中识别新类别。在这种设置中,对预训练语言模型进行微调可能导致严重的过拟合。本文提出了一种嵌入幻觉(EmbedHalluc)方法,该方法

作者:Yiren Jian, Chongyang Gao, Soroush Vosoughi · 语言:en

前往原址学习

简介

少样本语言学习者能够从预训练模型中提取知识,以从少量标注句子中识别新类别。在这种设置中,对预训练语言模型进行微调可能导致严重的过拟合。本文提出了一种嵌入幻觉(EmbedHalluc)方法,该方法

返回教程库 · 察元AI产品家族