察元AI教程库 · 文章 · 多模态

稀疏性与相似性：利用长尾分布实现多模态大语言模型中动态优化的token表示

最近，多模态大语言模型（MM-LLMs）在各种任务中取得了显著进展，但其高昂的计算成本限制了广泛应用。主要的计算负担来自于LLM层中处理拼接的文本和视觉标记，其中输入标记长度

作者:Gaotong Yu, Yi Chen, Jian Xu · 语言:en

简介