察元AI教程库 · 文章 · 大模型

大型语言模型的模型压缩与高效推理：综述

基于Transformer的大型语言模型取得了巨大成功。然而，推理过程中巨大的内存和计算成本使得在资源受限的设备上部署这些大模型变得极具挑战。本文研究了压缩和高效方法。

作者:Wenxiao Wang, Wei Chen, Yicong Luo · 语言:en

前往原址学习

简介

基于Transformer的大型语言模型取得了巨大成功。然而，推理过程中巨大的内存和计算成本使得在资源受限的设备上部署这些大模型变得极具挑战。本文研究了压缩和高效方法。

返回教程库 · 察元AI产品家族