察元AI教程库 · 文章 · 大模型

IAA:内适配架构使冻结的大语言模型具备多模态能力

在多模态大型语言模型(MLLMs)领域,常见的方法通常是在训练过程中解冻语言模型,以促进对视觉内容的深入理解。然而,使用视觉-语言数据对这些模型进行微调,往往会导致其自然语言能力的退化

作者:Bin Wang, Chunyu Xie, Dawei Leng · 语言:en

前往原址学习

简介

在多模态大型语言模型(MLLMs)领域,常见的方法通常是在训练过程中解冻语言模型,以促进对视觉内容的深入理解。然而,使用视觉-语言数据对这些模型进行微调,往往会导致其自然语言能力的退化

返回教程库 · 察元AI产品家族