察元AI教程库 · 文章 · 微调

GSQ-Tuning：面向设备端大型语言模型的全量化训练中采用组共享指数整数

大型语言模型（LLMs）的微调技术取得了显著成果。然而，传统的LLM微调方法面临重大挑战：它们需要大量浮点（FP）计算，处理敏感数据时引发隐私问题，且对资源要求极高，难以在资源受限的环境中部署。

作者:Sifan Zhou, Shuo Wang, Zhihang Yuan · 语言:en

前往原址学习

简介

大型语言模型（LLMs）的微调技术取得了显著成果。然而，传统的LLM微调方法面临重大挑战：它们需要大量浮点（FP）计算，处理敏感数据时引发隐私问题，且对资源要求极高，难以在资源受限的环境中部署。

返回教程库 · 察元AI产品家族