察元AI教程库 · 文章 · 多模态

S$^2$Prune:多模态大语言模型中的空间结构视觉令牌剪枝

视觉标记修剪通过保留视觉标记的子集来减少多模态大型语言模型(MLLMs)的推理开销。现有方法通常基于重要性或冗余性选择标记。然而,我们发现这些标准在不同输入上会产生稳定的空域偏差。

作者:Yuanyuan Jia, Shunpu Tang, Qianqian Yang · 语言:en

前往原址学习

简介

视觉标记修剪通过保留视觉标记的子集来减少多模态大型语言模型(MLLMs)的推理开销。现有方法通常基于重要性或冗余性选择标记。然而,我们发现这些标准在不同输入上会产生稳定的空域偏差。

返回教程库 · 察元AI产品家族