察元AI教程库 · 文章 · 多模态

MQuant：通过全静态量化释放多模态大语言模型的推理潜力

多模态大语言模型（MLLMs）由于其理解多模态输入的能力而受到广泛关注。然而，其庞大的参数规模和巨大的计算需求严重阻碍了其实际部署和应用。尽管量化是一种有效方法

作者:JiangYong Yu, Sifan Zhou, Dawei Yang · 语言:en

简介