察元AI教程库 · 文章 · 多模态
我们引入Ferret,一种新型的多模态大语言模型(MLLM),能够理解图像中任意形状或粒度的指称,并准确地将开放词汇描述进行定位。为了在LLM范式中统一指称与定位,Ferret采用了一种新颖且强大的混合架构
作者:Haoxuan You, Haotian Zhang, Zhe Gan · 语言:en
我们引入Ferret,一种新型的多模态大语言模型(MLLM),能够理解图像中任意形状或粒度的指称,并准确地将开放词汇描述进行定位。为了在LLM范式中统一指称与定位,Ferret采用了一种新颖且强大的混合架构