察元AI教程库 · 文章 · 大模型

在Transformer深度中测量最优传输

变换器在每一层中携带每个标记的状态，整个词汇集合共同形成一个随深度移动的云。我们问：一个训练好的网络是否能以最优传输的方式移动这个云：以最低成本，沿着将每个标记与其最优配对的地图进行移动

作者:Alexandre Quemy · 语言:en

简介