察元AI教程库 · 文章 · 大模型
DLLMQuant:基于扩散的大型语言模型量化方法
基于扩散的大型语言模型(DLLMs)在非自回归文本生成方面表现出潜力,但其部署受限于模型规模大和计算成本高。后训练量化(PTQ),一种广泛用于压缩和加速大型语言模型的常用方法
作者:Chen Xu, Dawei Yang · 语言:en
前往原址学习
简介
基于扩散的大型语言模型(DLLMs)在非自回归文本生成方面表现出潜力,但其部署受限于模型规模大和计算成本高。后训练量化(PTQ),一种广泛用于压缩和加速大型语言模型的常用方法
返回教程库 · 察元AI产品家族