察元AI教程库 · 文章 · 多模态

CoVFT:面向多模态大语言模型的上下文感知视觉微调

多模态大语言模型(MLLMs)在跨模态感知和推理方面取得了显著进展,但一个基本问题仍未解决:视觉编码器应微调还是冻结?尽管像LLaVA和Qwen-VL这样的模型取得了成功,但设计选择的不一致性和

作者:Nan Zhou, Huiqun Wang, Yaoyan Zheng · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)在跨模态感知和推理方面取得了显著进展,但一个基本问题仍未解决:视觉编码器应微调还是冻结?尽管像LLaVA和Qwen-VL这样的模型取得了成功,但设计选择的不一致性和

返回教程库 · 察元AI产品家族