察元AI教程库 · 文章 · 排行榜

扩散大语言模型中的提示压缩：在LLaDA上评估LLMLingua-2

提示压缩可以降低大型语言模型的推理成本和上下文长度，但以往的评估主要集中在自回归架构上。本研究探讨了LLMLingua-2是否能有效迁移到扩散式大型语言模型（DLLMs），特别是LLaDA-8B-Instruct。我们评估了

作者:Sterling Huang, Abigayle Brown, Jiyoo Noh · 语言:en

前往原址学习

简介

提示压缩可以降低大型语言模型的推理成本和上下文长度，但以往的评估主要集中在自回归架构上。本研究探讨了LLMLingua-2是否能有效迁移到扩散式大型语言模型（DLLMs），特别是LLaDA-8B-Instruct。我们评估了

返回教程库 · 察元AI产品家族