察元AI教程库 · 文章 · 多模态

EM-KD：基于不平衡视觉令牌的高效多模态大语言模型蒸馏

高效的多模态大语言模型（MLLMs）通过压缩视觉令牌来降低资源消耗，但视觉信息的丢失会损害理解能力。尽管一些方法引入了知识蒸馏来增强学生模型，却忽略了根本的差异

作者:Ze Feng, Sen Yang, Boqiang Duan · 语言:en

简介