察元AI教程库 · 文章 · 大模型

模型无关自压缩：大语言模型的知识保持

人类在学习新知识的同时可以保留旧知识，但大型语言模型（LLMs）在事后预训练或监督微调（SFT）于特定领域数据时，往往会出现灾难性遗忘。此外，对于多模态大型语言模型（MLLMs），它们由LLM组成

作者:Zilun Zhang, Yutao Sun, Tiancheng Zhao · 语言:en

前往原址学习

简介

人类在学习新知识的同时可以保留旧知识，但大型语言模型（LLMs）在事后预训练或监督微调（SFT）于特定领域数据时，往往会出现灾难性遗忘。此外，对于多模态大型语言模型（MLLMs），它们由LLM组成

返回教程库 · 察元AI产品家族