察元AI教程库 · 文章 · 排行榜
自回归语言模型(ARMs)具有强大的似然性,但本质上是串行的:它们每前向传播生成一个标记,这限制了吞吐量,也对长序列增加了延迟。扩散语言模型(DLMs)在位置上并行,因此在语言
作者:Amin Karimi Monsefi, Nikhil Bhendawade, Manuel Rafael Ciosici · 语言:en
自回归语言模型(ARMs)具有强大的似然性,但本质上是串行的:它们每前向传播生成一个标记,这限制了吞吐量,也对长序列增加了延迟。扩散语言模型(DLMs)在位置上并行,因此在语言