察元AI教程库 · 文章 · 多模态

探索多粒度概念注释对多模态大语言模型的应用

多模态大语言模型(MLLMs)通过仅在粗粒度概念注释(如图像字幕)上进行预训练,在视觉-语言任务中表现出色。我们假设,整合细粒度概念注释(如对象标签和对象区域)将能进一步提升性能,因为

作者:Xiao Xu, Tianhao Niu, Yuxi Xie · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)通过仅在粗粒度概念注释(如图像字幕)上进行预训练,在视觉-语言任务中表现出色。我们假设,整合细粒度概念注释(如对象标签和对象区域)将能进一步提升性能,因为

返回教程库 · 察元AI产品家族