察元AI教程库 · 文章 · 多模态

ShortV:通过冻结无效层中的视觉令牌实现高效多模态大语言模型

多模态大语言模型(MLLMs)由于其规模庞大以及大量视觉token,导致高昂的计算成本。本文通过引入一种新指标——层贡献(LC),来研究MLLMs中的逐层冗余,量化单个层的影响

作者:Qianhao Yuan, Qingyu Zhang, Yanjiang Liu · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)由于其规模庞大以及大量视觉token,导致高昂的计算成本。本文通过引入一种新指标——层贡献(LC),来研究MLLMs中的逐层冗余,量化单个层的影响

返回教程库 · 察元AI产品家族