察元AI教程库 · 文章 · 大模型

SLAB:基于简化线性注意力和渐进式重参数化批归一化的高效Transformer

Transformer已成为自然语言和计算机视觉任务的基础架构。然而,其高昂的计算成本使得在资源受限的设备上部署变得非常困难。本文研究了高效Transformer中的计算瓶颈模块,即

作者:Jialong Guo, Xinghao Chen, Yehui Tang · 语言:en

前往原址学习

简介

Transformer已成为自然语言和计算机视觉任务的基础架构。然而,其高昂的计算成本使得在资源受限的设备上部署变得非常困难。本文研究了高效Transformer中的计算瓶颈模块,即

返回教程库 · 察元AI产品家族