察元AI教程库 · 文章 · 大模型

TOGGLE：基于时序逻辑引导的边缘大型语言模型压缩

大型语言模型（LLMs）在自然语言任务中表现出卓越性能，但需要大量计算资源，限制了其在资源受限的边缘设备上的部署。现有的压缩技术，如量化和剪枝，通常会损害关键的语言能力。

作者:Khurram Khalil, Khaza Anuarul Hoque · 语言:en

前往原址学习

简介

大型语言模型（LLMs）在自然语言任务中表现出卓越性能，但需要大量计算资源，限制了其在资源受限的边缘设备上的部署。现有的压缩技术，如量化和剪枝，通常会损害关键的语言能力。

返回教程库 · 察元AI产品家族