察元AI教程库 · 文章 · 多模态

PPE:位置保持嵌入,用于多模态大语言模型中的标记压缩

多模态大语言模型(MLLMs)在视觉-语言任务中表现优异,但常因冗余视觉标记而导致效率低下。现有标记合并方法虽然减少了序列长度,却常常通过忽略细节而破坏了空间布局和时间连续性。

作者:Mouxiao Huang, Borui Jiang, Dehua Zheng · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)在视觉-语言任务中表现优异,但常因冗余视觉标记而导致效率低下。现有标记合并方法虽然减少了序列长度,却常常通过忽略细节而破坏了空间布局和时间连续性。

返回教程库 · 察元AI产品家族