察元AI教程库 · 文章 · 大模型

TreeCoders：Transformer的树状结构

本文我们介绍了TreeCoders，一种新型的Transformer树结构。我们从传统的线性Transformer转向完全的k-ary树。Transformer块作为节点，通用分类器学习选择最佳子节点，并将标记序列路由到特定的叶节点。该

作者:Pierre Colonna D'Istria, Abdulrahman Altahhan · 语言:en

简介