察元AI教程库 · 文章 · 多模态
多模态大语言模型(MLLMs)由于视觉token序列的高冗余性而存在巨大的计算开销。现有方法通常采用单层视觉Transformer(ViT)特征和静态剪枝策略来解决此问题。然而,这种固定配置
作者:Yunkai Dang, Yizhu Jiang, Yifan Jiang · 语言:en
多模态大语言模型(MLLMs)由于视觉token序列的高冗余性而存在巨大的计算开销。现有方法通常采用单层视觉Transformer(ViT)特征和静态剪枝策略来解决此问题。然而,这种固定配置