察元AI教程库 · 文章 · 大模型

N-ODE Transformer：一种使用神经普通微分方程的深度自适应Transformer变体

我们使用神经普通微分方程来构建一种变体的Transformer，该模型在深度上是自适应的，即由普通微分方程求解器根据输入动态决定时间步数。我们提出N-ODE Transformer的目标是探究其深度自适应特性是否能提升模型性能

作者:Aaron Baier-Reinio, Hans De Sterck · 语言:en

简介