察元AI教程库 · 文章 · 多模态

多阶段视觉令牌滴落:迈向高效的多模态大语言模型

多模态大语言模型中的视觉令牌通常表现出显著的空间和时间冗余,并占据大部分输入令牌,这损害了其推理效率。为解决此问题,一些近期工作提出了在推理过程中丢弃不重要令牌的方法。

作者:Ting Liu, Liangtao Shi, Richang Hong · 语言:en

前往原址学习

简介

多模态大语言模型中的视觉令牌通常表现出显著的空间和时间冗余,并占据大部分输入令牌,这损害了其推理效率。为解决此问题,一些近期工作提出了在推理过程中丢弃不重要令牌的方法。

返回教程库 · 察元AI产品家族