察元AI教程库 · 文章 · 大模型

BWTA:通过算法-硬件协同设计实现的高效且准确的二值化变换器

超低比特量化为基于变换器的模型带来了显著的效率提升,但精度下降和有限的GPU支持阻碍了其广泛应用。本文分析了二值化中的零点失真,并提出了二值权重与三值激活(BWTA)量化方案

作者:Yifu Ding, Xianglong Liu, Shenghao Jin · 语言:en

前往原址学习

简介

超低比特量化为基于变换器的模型带来了显著的效率提升,但精度下降和有限的GPU支持阻碍了其广泛应用。本文分析了二值化中的零点失真,并提出了二值权重与三值激活(BWTA)量化方案

返回教程库 · 察元AI产品家族