察元AI教程库 · 文章 · 微调

RoSTE：一种用于大型语言模型的高效量化感知监督微调方法

监督微调是调整预训练大型语言模型（LLMs）以适应下游任务的标准方法。量化作为一种近期研究的后训练技术，用于高效部署LLM。为了获得量化后的微调LLM，传统流程会首先进行微调

作者:Quan Wei, Chung-Yiu Yau, Hoi-To Wai · 语言:en

简介