察元AI教程库 · 文章 · 大模型

可学习的多尺度小波Transformer:一种自注意力机制的新型替代方案

基于自注意力机制的Transformer架构在众多自然语言处理(NLP)任务中取得了最先进的成果,能够有效建模长距离依赖关系。然而,自注意力机制的计算复杂度随序列长度平方增长,

作者:Andrew Kiruluta, Priscilla Burity, Samantha Williams · 语言:en

前往原址学习

简介

基于自注意力机制的Transformer架构在众多自然语言处理(NLP)任务中取得了最先进的成果,能够有效建模长距离依赖关系。然而,自注意力机制的计算复杂度随序列长度平方增长,

返回教程库 · 察元AI产品家族