察元AI教程库 · 文章 · 多模态

CLASP:面向多模态大语言模型的类别自适应层融合与双阶段剪枝

多模态大语言模型(MLLMs)由于视觉token序列的高冗余性而存在巨大的计算开销。现有方法通常采用单层视觉Transformer(ViT)特征和静态剪枝策略来解决此问题。然而,这种固定配置

作者:Yunkai Dang, Yizhu Jiang, Yifan Jiang · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)由于视觉token序列的高冗余性而存在巨大的计算开销。现有方法通常采用单层视觉Transformer(ViT)特征和静态剪枝策略来解决此问题。然而,这种固定配置

返回教程库 · 察元AI产品家族