察元AI教程库 · 文章 · 多模态
多模态大语言模型(MLLMs)由于参数庞大以及需要额外的视觉信息表示输入令牌,导致推理过程需要大量计算。本文引入了视觉令牌撤回(VTW),一种即插即用的模块,以提升MLLMs的快速推理
作者:Zhihang Lin, Mingbao Lin, Luxi Lin · 语言:en
多模态大语言模型(MLLMs)由于参数庞大以及需要额外的视觉信息表示输入令牌,导致推理过程需要大量计算。本文引入了视觉令牌撤回(VTW),一种即插即用的模块,以提升MLLMs的快速推理