察元AI教程库 · 文章 · 多模态

MLLM-Microscope:揭示多模态大语言模型内部隐藏结构

本研究提出了MLLM-Microscope,一种用于分析多模态大型语言模型(MLLMs)内部隐藏表示的新系统。我们的系统评估了多模态token嵌入在Transformer层中的线性性、固有维度和各向异性。利用科学

作者:Ravil Mussabayev, Rustam Mussabayev · 语言:en

前往原址学习

简介

本研究提出了MLLM-Microscope,一种用于分析多模态大型语言模型(MLLMs)内部隐藏表示的新系统。我们的系统评估了多模态token嵌入在Transformer层中的线性性、固有维度和各向异性。利用科学

返回教程库 · 察元AI产品家族