察元AI教程库 · 文章 · 多模态

SepPrune：一种基于分离器的多模态大语言模型高效剪枝框架

近期的多模态大型语言模型（MLLMs），如Qwen2.5-VL和InternVL3，为高分辨率输入生成大量视觉令牌，导致巨大的计算成本。现有的视觉令牌剪枝方法要么依赖跨模态注意力，无法在剪枝前进行处理

作者:Yuchen Wang, Qihui Zhu, Yang Liu · 语言:en

前往原址学习

简介

近期的多模态大型语言模型（MLLMs），如Qwen2.5-VL和InternVL3，为高分辨率输入生成大量视觉令牌，导致巨大的计算成本。现有的视觉令牌剪枝方法要么依赖跨模态注意力，无法在剪枝前进行处理

返回教程库 · 察元AI产品家族