察元AI教程库 · 文章 · 大模型

ModRWKV:变换器在线性时间内的多模态处理

目前,大多数多模态研究基于大型语言模型(LLMs)和具有二次复杂度的Transformer架构。尽管线性模型(如RNN)具有低推理成本,但它们的应用大多局限于纯文本模态。本研究探索了多模态能力

作者:Jiale Kang, Ziyin Yue, Qingyu Yin · 语言:en

前往原址学习

简介

目前,大多数多模态研究基于大型语言模型(LLMs)和具有二次复杂度的Transformer架构。尽管线性模型(如RNN)具有低推理成本,但它们的应用大多局限于纯文本模态。本研究探索了多模态能力

返回教程库 · 察元AI产品家族