察元AI教程库 · 文章 · 大模型

傅里叶变换器：通过FFT算子去除序列冗余实现快速长距离建模

Transformer模型以计算需求高著称，对于长序列而言成本极高，因为自注意力模块的计算和空间复杂度与序列长度呈二次关系。许多研究人员致力于设计新的自注意力形式或引入

作者:Ziwei He, Meng Yang, Minwei Feng · 语言:en

简介