察元AI教程库 · 文章 · 多模态
OrchMLLM:通过批量后平衡多模态数据来加速多模态大语言模型训练
多模态大语言模型(MLLMs),如GPT-4o,正受到广泛关注。在探索MLLM训练过程中,我们发现了模态组成不一致现象,即不同示例中某种模态的比例变化显著。该现象加剧了
作者:Yijie Zheng, Bangjun Xiao, Lei Shi · 语言:en
前往原址学习
简介
多模态大语言模型(MLLMs),如GPT-4o,正受到广泛关注。在探索MLLM训练过程中,我们发现了模态组成不一致现象,即不同示例中某种模态的比例变化显著。该现象加剧了
返回教程库 · 察元AI产品家族