察元AI教程库 · 文章 · 多模态

Mono-InternVL:通过内生视觉预训练推动单体多模态大语言模型的边界

本文聚焦于将视觉编码和语言解码整合到单一大型语言模型(LLM)中的单体多模态大型语言模型(MLLMs)。我们发现,现有单体MLLMs的预训练策略常存在优化不稳定或灾难性遗忘的问题

作者:Gen Luo, Xue Yang, Wenhan Dou · 语言:en

前往原址学习

简介

本文聚焦于将视觉编码和语言解码整合到单一大型语言模型(LLM)中的单体多模态大型语言模型(MLLMs)。我们发现,现有单体MLLMs的预训练策略常存在优化不稳定或灾难性遗忘的问题

返回教程库 · 察元AI产品家族