察元AI教程库 · 文章 · 大模型

重新审视离线压缩:超越基于分解方法的Transformer语言模型

最近的基于Transformer的语言模型在许多自然语言处理(NLP)任务中取得了卓越的成果。然而,它们的巨大规模常常使得它们在内存受限的设备上难以使用,需要从业者将其压缩为更小的网络。本文探讨了离线压缩的方法

作者:Mohammadreza Banaei, Klaudia Bałazy, Artur Kasymov · 语言:en

前往原址学习

简介

最近的基于Transformer的语言模型在许多自然语言处理(NLP)任务中取得了卓越的成果。然而,它们的巨大规模常常使得它们在内存受限的设备上难以使用,需要从业者将其压缩为更小的网络。本文探讨了离线压缩的方法

返回教程库 · 察元AI产品家族