察元AI教程库 · 文章 · 多模态
多阶段视觉令牌滴落:迈向高效的多模态大语言模型
多模态大语言模型中的视觉令牌通常表现出显著的空间和时间冗余,并占据大部分输入令牌,这损害了其推理效率。为解决此问题,一些近期工作提出了在推理过程中丢弃不重要令牌的方法。
作者:Ting Liu, Liangtao Shi, Richang Hong · 语言:en
前往原址学习
简介
多模态大语言模型中的视觉令牌通常表现出显著的空间和时间冗余,并占据大部分输入令牌,这损害了其推理效率。为解决此问题,一些近期工作提出了在推理过程中丢弃不重要令牌的方法。
返回教程库 · 察元AI产品家族