察元AI教程库 · 文章 · 大模型

使用大型语言模型进行视觉编码器的层次预训练

计算机视觉领域通过可扩展的视觉编码器和多模态预训练框架取得了显著进展。然而，现有方法通常将视觉编码器和大语言模型（LLMs）视为独立模块，限制了层级视觉信息与LLM的深度融合。

作者:Eugene Lee, Ting-Yu Chang, Jui-Huang Tsai · 语言:en

前往原址学习

简介

计算机视觉领域通过可扩展的视觉编码器和多模态预训练框架取得了显著进展。然而，现有方法通常将视觉编码器和大语言模型（LLMs）视为独立模块，限制了层级视觉信息与LLM的深度融合。

返回教程库 · 察元AI产品家族