察元AI教程库 · 文章 · 多模态

GAP-MLLM:通过几何对齐预训练激活多模态大语言模型中的3D空间感知

多模态大语言模型(MLLMs)在语义推理方面表现出色,但在仅使用RGB输入时,其3D空间感知能力较差。尽管利用了3D重建模型中的隐式几何先验,基于图像的方法在3D场景中仍存在明显的性能差距

作者:Jiaxin Zhang, Junjun Jiang, Haijie Li · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)在语义推理方面表现出色,但在仅使用RGB输入时,其3D空间感知能力较差。尽管利用了3D重建模型中的隐式几何先验,基于图像的方法在3D场景中仍存在明显的性能差距

返回教程库 · 察元AI产品家族