察元AI教程库 · 文章 · 大模型

具有可学习核函数的线性变换器是更好的上下文模型

在自然语言处理这一快速发展的领域中,推动语言模型(LMs)的次二次架构前沿至关重要。当前的创新,包括状态空间模型,最初因其在语言建模任务上超越Transformer性能而备受赞誉。然而,

作者:Yaroslav Aksenov, Nikita Balagansky, Sofia Maria Lo Cicero Vaina · 语言:en

前往原址学习

简介

在自然语言处理这一快速发展的领域中,推动语言模型(LMs)的次二次架构前沿至关重要。当前的创新,包括状态空间模型,最初因其在语言建模任务上超越Transformer性能而备受赞誉。然而,

返回教程库 · 察元AI产品家族