察元AI教程库 · 文章 · 大模型

一种高效的Transformer解码器，采用压缩的子层

基于注意力机制的大型编码器-解码器网络（Transformer）由于其有效性而日益流行。但其解码器的高计算复杂度引发了效率问题。通过分析解码器的数学公式，我们证明，在某些温和条件下，

作者:Yanyang Li, Ye Lin, Tong Xiao · 语言:en

简介