察元AI教程库 · 文章 · 多模态

捕捉标记倾向以实现多模态大语言模型中的无训练标记剪枝

尽管视觉标记修剪对高效多模态大语言模型(MLLMs)至关重要,但现有的无训练方法存在一个关键局限:它们依赖静态、瞬时的启发式方法进行不可逆的过滤。这种方法忽略了MLLMs的层次结构,会

作者:Jie Ma, Zhike Qiu, Jie Gao · 语言:en

前往原址学习

简介

尽管视觉标记修剪对高效多模态大语言模型(MLLMs)至关重要,但现有的无训练方法存在一个关键局限:它们依赖静态、瞬时的启发式方法进行不可逆的过滤。这种方法忽略了MLLMs的层次结构,会

返回教程库 · 察元AI产品家族