察元AI教程库 · 文章 · 多模态

超越下一个令牌对齐：通过令牌交互蒸馏多模态大语言模型

多模态大语言模型（MLLMs）展示了出色的跨模态能力，但其庞大的规模带来了显著的部署挑战。知识蒸馏（KD）是压缩这些模型的有希望的解决方案，但现有方法主要依赖静态的下一个标记

作者:Lin Chen, Xiaoke Zhao, Kun Ding · 语言:en

简介