察元AI教程库 · 文章 · 微调
自回归(AR)语言模型逐个生成token,这限制了其推理速度。基于扩散的语言模型提供了有前景的替代方案,因为它们可以并行解码多个token。然而,我们发现当前扩散语言模型存在一个关键瓶颈:长解码-
作者:Yeongbin Seo, Dongha Lee, Jaehyung Kim · 语言:en
自回归(AR)语言模型逐个生成token,这限制了其推理速度。基于扩散的语言模型提供了有前景的替代方案,因为它们可以并行解码多个token。然而,我们发现当前扩散语言模型存在一个关键瓶颈:长解码-