察元AI教程库 · 文章 · 多模态

基于多模态大语言模型的单模态到混合模态对齐，用于文档图像机器翻译

文档图像机器翻译（DIMT）旨在翻译文档图像中的文本，由于训练数据有限以及视觉与文本信息之间的复杂交互，面临泛化挑战。为解决这些问题，我们引入M4Doc，一种新颖的单模态到混合模态的

作者:Yupu Liang, Yaping Zhang, Zhiyang Zhang · 语言:en

简介