察元AI教程库 · 文章 · 多模态

从可解释性角度探讨多模态大语言模型中的任务相关token压缩

现有的多模态大语言模型(MLLMs)处理大量视觉令牌,导致显著的计算成本和低效性。与指令相关的视觉令牌压缩表现出很强的任务相关性,这与MLLMs遵循指令的最终目标高度一致

作者:Lei Lei, Jie Gu, Xiaokang Ma · 语言:en

前往原址学习

简介

现有的多模态大语言模型(MLLMs)处理大量视觉令牌,导致显著的计算成本和低效性。与指令相关的视觉令牌压缩表现出很强的任务相关性,这与MLLMs遵循指令的最终目标高度一致

返回教程库 · 察元AI产品家族