察元AI教程库 · 文章 · 多模态

OrchMLLM:通过批量后平衡多模态数据来加速多模态大语言模型训练

多模态大语言模型(MLLMs),如GPT-4o,正受到广泛关注。在探索MLLM训练过程中,我们发现了模态组成不一致现象,即不同示例中某种模态的比例变化显著。该现象加剧了

作者:Yijie Zheng, Bangjun Xiao, Lei Shi · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs),如GPT-4o,正受到广泛关注。在探索MLLM训练过程中,我们发现了模态组成不一致现象,即不同示例中某种模态的比例变化显著。该现象加剧了

返回教程库 · 察元AI产品家族