察元AI教程库 · 文章 · 大模型

SoLA:利用软激活稀疏性和低秩分解实现大型语言模型压缩

大型语言模型(LLMs)在各种任务中表现出色,但其十亿级参数规模带来了部署挑战。尽管现有方法试图减少LLM的规模,但要么需要特殊硬件支持,要么需要昂贵的后训练来维持

作者:Xinhao Huang, You-Liang Huang, Zeyi Wen · 语言:en

前往原址学习

简介

大型语言模型(LLMs)在各种任务中表现出色,但其十亿级参数规模带来了部署挑战。尽管现有方法试图减少LLM的规模,但要么需要特殊硬件支持,要么需要昂贵的后训练来维持

返回教程库 · 察元AI产品家族