察元AI教程库 · 文章 · 大模型

为自然语言理解设计的Transformer模型的量化感知与张量压缩训练

微调的Transformer模型在许多自然语言任务中表现出优越性能。然而，由于模型规模庞大，无法在资源受限的设备上部署高性能的Transformer模型。本文提出了一种量化感知张量压缩训练方法，以减少

作者:Zi Yang, Samridhi Choudhary, Siegfried Kunzmann · 语言:en

简介