察元AI教程库 · 文章 · 微调
在大型语言模型(LLMs)中,记忆现象使其容易受到数据提取攻击。尽管预训练阶段的记忆现象已被广泛研究,但关于其在微调阶段(尤其是LoRA微调)的影响研究较少,LoRA微调是一种广泛采用的参数高效方法。
作者:Fei Wang, Baochun Li · 语言:en
在大型语言模型(LLMs)中,记忆现象使其容易受到数据提取攻击。尽管预训练阶段的记忆现象已被广泛研究,但关于其在微调阶段(尤其是LoRA微调)的影响研究较少,LoRA微调是一种广泛采用的参数高效方法。