察元AI教程库 · 文章 · 微调

QuZO：用于大型语言模型的量化零阶微调

语言模型（LL ）通常被量化以降低精度，从而减少推理过程中的内存消耗和延迟。然而，量化通常会降低模型性能，因此需要对各种下游任务进行微调。传统的微调方法，如随机梯度下降

作者:Jiajun Zhou, Yifan Yang, Kai Zhen · 语言:en

前往原址学习

简介

语言模型（LL ）通常被量化以降低精度，从而减少推理过程中的内存消耗和延迟。然而，量化通常会降低模型性能，因此需要对各种下游任务进行微调。传统的微调方法，如随机梯度下降

返回教程库 · 察元AI产品家族