察元AI教程库 · 文章 · 多模态

SAISA：面向训练与推理效率的多模态大语言模型的新方向

多模态大语言模型（MLLMs）主要分为两种架构，每种架构在训练和推理效率之间存在权衡：嵌入空间对齐（如LLaVA-1.5）在推理阶段效率较低，而交叉注意力空间对齐（如Flamingo）在训练阶段效率较低

作者:Qianhao Yuan, Yanjiang Liu, Yaojie Lu · 语言:en

简介