察元AI教程库 · 文章 · 多模态
多模态大语言模型(MLLMs)在跨模态感知和推理方面取得了显著进展,但一个基本问题仍未解决:视觉编码器应微调还是冻结?尽管像LLaVA和Qwen-VL这样的模型取得了成功,但设计选择的不一致性和
作者:Nan Zhou, Huiqun Wang, Yaoyan Zheng · 语言:en
多模态大语言模型(MLLMs)在跨模态感知和推理方面取得了显著进展,但一个基本问题仍未解决:视觉编码器应微调还是冻结?尽管像LLaVA和Qwen-VL这样的模型取得了成功,但设计选择的不一致性和