察元AI教程库 · 文章 · 部署

Fast-dLLM++：基于Fréchet轮廓解码的更快扩散型大型语言模型推理

扩散式大型语言模型承诺并行生成令牌，但推理过程仍受限于决定哪些被遮蔽的令牌可以安全地被提交。Fast-dLLM通过KV缓存和置信度引导的并行解码解决了这一问题，但其解码理论使用了同质的高维

作者:Siva Rajesh Kasa, Yasong Dai, Sumit Negi · 语言:en

简介