察元AI教程库 · 文章 · 大模型

剪枝作为防御:减少大型语言模型中的记忆现象

大型语言模型已被证明会记住其训练数据的大量部分,当适当提示时可以重现。本研究探讨了简单剪枝技术对这种行为的影响。我们的研究结果表明,剪枝能有效减少记忆程度

作者:Mansi Gupta, Nikhar Waghela, Sarthak Gupta · 语言:en

前往原址学习

简介

大型语言模型已被证明会记住其训练数据的大量部分,当适当提示时可以重现。本研究探讨了简单剪枝技术对这种行为的影响。我们的研究结果表明,剪枝能有效减少记忆程度

返回教程库 · 察元AI产品家族