察元AI教程库 · 文章 · 多模态

LEO-MINI:一种基于条件令牌减少和多模态专家混合的高效多模态大语言模型

多模态大语言模型(MLLMs)中视觉令牌的冗余显著降低了其计算效率。最近的方法,如重采样器和摘要器,试图减少视觉令牌数量,但以牺牲视觉推理能力为代价。为解决这一问题,我们提出

作者:Yimu Wang, Mozhgan Nasr Azadani, Sean Sedwards · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)中视觉令牌的冗余显著降低了其计算效率。最近的方法,如重采样器和摘要器,试图减少视觉令牌数量,但以牺牲视觉推理能力为代价。为解决这一问题,我们提出

返回教程库 · 察元AI产品家族