察元AI教程库 · 文章 · 大模型

在大型语言模型调整中重温灾难性遗忘

灾难性遗忘(CF)指的是模型在学习新数据时遗忘先前获取的知识。这会削弱大型语言模型(LLMs)在微调过程中的有效性,但其根本原因尚未得到充分研究。本文首次揭示了

作者:Hongyu Li, Liang Ding, Meng Fang · 语言:en

前往原址学习

简介

灾难性遗忘(CF)指的是模型在学习新数据时遗忘先前获取的知识。这会削弱大型语言模型(LLMs)在微调过程中的有效性,但其根本原因尚未得到充分研究。本文首次揭示了

返回教程库 · 察元AI产品家族