察元AI教程库 · 文章 · 多模态

学会看见你需要的内容：多模态大语言模型中的注视注意力

当人类描述一个视觉场景时，他们并不会均匀处理整个图像，而是会优先关注与描述意图相关的区域。相比之下，当前的多模态大语言模型（MLLMs）在每个生成步骤中都会关注所有视觉令牌，导致信息稀释

作者:Junha Song, Byeongho Heo, Geonmo Gu · 语言:en

简介