察元AI教程库 · 文章 · 多模态
从可解释性角度探讨多模态大语言模型中的任务相关token压缩
现有的多模态大语言模型(MLLMs)处理大量视觉令牌,导致显著的计算成本和低效性。与指令相关的视觉令牌压缩表现出很强的任务相关性,这与MLLMs遵循指令的最终目标高度一致
作者:Lei Lei, Jie Gu, Xiaokang Ma · 语言:en
前往原址学习
简介
现有的多模态大语言模型(MLLMs)处理大量视觉令牌,导致显著的计算成本和低效性。与指令相关的视觉令牌压缩表现出很强的任务相关性,这与MLLMs遵循指令的最终目标高度一致
返回教程库 · 察元AI产品家族