察元AI教程库 · 文章 · 大模型

Dream 7B：扩散型大型语言模型

我们引入了Dream 7B，迄今为止最强大的开源扩散大语言模型。与自回归（AR）模型按顺序生成标记不同，Dream 7B采用离散扩散建模，通过迭代去噪并行优化序列。我们的模型在多个方面持续优于现有模型

作者:Jiacheng Ye, Zhihui Xie, Lin Zheng · 语言:en

简介