察元AI教程库 · 文章 · 大模型

并非每个标记都需要遗忘:选择性遗忘以限制大型语言模型在遗忘过程中效用的变化

大型语言模型(LLM)的“反向学习”最近受到广泛关注,主要是为了移除模型中不需要的信息,如私密、敏感或版权内容。然而,传统的反向学习方法会无差别地更新模型参数,以忘记所有标记

作者:Yixin Wan, Anil Ramakrishna, Kai-Wei Chang · 语言:en

前往原址学习

简介

大型语言模型(LLM)的“反向学习”最近受到广泛关注,主要是为了移除模型中不需要的信息,如私密、敏感或版权内容。然而,传统的反向学习方法会无差别地更新模型参数,以忘记所有标记

返回教程库 · 察元AI产品家族