察元AI教程库 · 文章 · 大模型

BitNet：基于1位Transformer的大型语言模型扩展

大型语言模型的规模不断增加，给部署带来了挑战，并引发了对高能耗带来的环境影响的担忧。本文介绍了BitNet，一种可扩展且稳定的1位Transformer架构，专为大型语言模型设计。具体而言，我们

作者:Hongyu Wang, Shuming Ma, Li Dong · 语言:en

简介