察元AI教程库 · 文章 · 大模型

PB-LLM ：部分二值化大型语言模型

本文探讨了网络二值化，这是一种激进的量化形式，将模型权重压缩到单比特，特别适用于大型语言模型（LLMs）的压缩。由于以往的二值化方法会破坏LLMs，我们提出了一种新方法，即部分二值化大型语言模型（PB-LLM），该方法

作者:Yuzhang Shang, Zhihang Yuan, Qiang Wu · 语言:en

前往原址学习

简介

本文探讨了网络二值化，这是一种激进的量化形式，将模型权重压缩到单比特，特别适用于大型语言模型（LLMs）的压缩。由于以往的二值化方法会破坏LLMs，我们提出了一种新方法，即部分二值化大型语言模型（PB-LLM），该方法

返回教程库 · 察元AI产品家族