察元AI教程库 · 文章 · 多模态

通过注意力驱动的自压缩实现视觉令牌减少，用于高效多模态大语言模型

多模态大语言模型（MLLMs）在处理大量视觉token时，需要经过所有LLM层，这带来了巨大的计算成本。现有的剪枝方法要么在LLM之前进行，由于不同的编码器-投影器设计限制了其通用性，要么在LLM内部使用启发式方法，这些方法

作者:Omer Faruk Deniz, Ruiyu Mao, Ruochen Li · 语言:en

简介