察元AI教程库 · 文章 · 微调

将稀疏微调扩展到大型语言模型

大型语言模型(LLMs)由于参数数量巨大,难以进行完全微调(例如通过指令或人类反馈)。参数高效的稀疏微调方法在性能上表现良好,但其内存需求随比例增加

作者:Alan Ansell, Ivan Vulić, Hannah Sterz · 语言:en

前往原址学习

简介

大型语言模型(LLMs)由于参数数量巨大,难以进行完全微调(例如通过指令或人类反馈)。参数高效的稀疏微调方法在性能上表现良好,但其内存需求随比例增加

返回教程库 · 察元AI产品家族