察元AI教程库 · 文章 · 多模态

LION：通过双层级视觉知识增强多模态大语言模型

多模态大语言模型（MLLMs）使大语言模型（LLMs）具备了感知和理解多模态信号的能力。然而，大多数现有的MLLMs主要采用在粗粒度图像-文本对上预训练的视觉编码器，导致视觉知识的提取和推理不足

作者:Gongwei Chen, Leyang Shen, Rui Shao · 语言:en

前往原址学习

简介

多模态大语言模型（MLLMs）使大语言模型（LLMs）具备了感知和理解多模态信号的能力。然而，大多数现有的MLLMs主要采用在粗粒度图像-文本对上预训练的视觉编码器，导致视觉知识的提取和推理不足

返回教程库 · 察元AI产品家族