察元AI教程库 · 文章 · 大模型

长距离竞技场：一个用于高效Transformer的基准

变换器模型在长序列长度上的扩展效果不佳，主要因为自注意力的二次复杂度。近几个月，大量高效、快速的变换器被提出以解决此问题，大多数声称其模型质量优于或与现有方法相当

作者:Yi Tay, Mostafa Dehghani, Samira Abnar · 语言:en

简介