察元AI教程库 · 文章 · 微调

QWHA：量化感知瓦申-哈达玛自适应用于大型语言模型的参数高效微调

对大语言模型（LLMs）高效部署的需求推动了量化技术的发展，该技术降低了推理成本，同时参数高效的微调（PEFT）降低了训练开销。这促使了量化感知的PEFT的发展，以产生既准确又高效的模型

作者:Hyesung Jeon, Seojune Lee, Beomseok Kang · 语言:en

前往原址学习

简介

对大语言模型（LLMs）高效部署的需求推动了量化技术的发展，该技术降低了推理成本，同时参数高效的微调（PEFT）降低了训练开销。这促使了量化感知的PEFT的发展，以产生既准确又高效的模型

返回教程库 · 察元AI产品家族