察元AI教程库 · 文章 · 微调

回忆与学习：通过减少遗忘来微调深度预训练的语言模型

深度预训练的语言模型通过先预训练再微调的方式取得了巨大成功。但这种顺序的迁移学习范式通常会面临灾难性遗忘问题，导致性能不佳。为了减少遗忘，我们提出了一种

作者:Sanyuan Chen, Yutai Hou, Yiming Cui · 语言:en

前往原址学习

简介

深度预训练的语言模型通过先预训练再微调的方式取得了巨大成功。但这种顺序的迁移学习范式通常会面临灾难性遗忘问题，导致性能不佳。为了减少遗忘，我们提出了一种

返回教程库 · 察元AI产品家族