察元AI教程库 · 文章 · 微调

HyPe：通过隐藏表示扰动改进预训练语言模型微调

具有Transformer结构的语言模型在自然语言处理中表现出色。然而，在对预训练语言模型进行下游任务微调时，仍存在过拟合或表示坍塌等问题。本研究提出HyPe，一种简单的

作者:Hongyi Yuan, Zheng Yuan, Chuanqi Tan · 语言:en

前往原址学习

简介

具有Transformer结构的语言模型在自然语言处理中表现出色。然而，在对预训练语言模型进行下游任务微调时，仍存在过拟合或表示坍塌等问题。本研究提出HyPe，一种简单的

返回教程库 · 察元AI产品家族