察元AI教程库 · 文章 · 大模型

T^2MLR：带有时间中间层递归的Transformer

Transformer推理受限于自回归解码，它通过token空间反复压缩丰富的隐状态计算，使得中间推理状态难以在时间上持久。我们引入了具有时间中间层递归（T2MLR）的Transformer，这是一种

作者:Ziyang Cai, Xingyu Zhu, Yihe Dong · 语言:en

前往原址学习

简介

Transformer推理受限于自回归解码，它通过token空间反复压缩丰富的隐状态计算，使得中间推理状态难以在时间上持久。我们引入了具有时间中间层递归（T2MLR）的Transformer，这是一种

返回教程库 · 察元AI产品家族