察元AI教程库 · 文章 · 多模态

基于事件流在极端光照下学习视觉感知的多模态大语言模型

多模态大语言模型(MLLMs)在标准条件下表现出强大的视觉-语言推理能力,但在极端光照条件下表现不佳,因为RGB输入会失去不可恢复的结构和语义。我们提出Event-MLLM,一种事件增强模型,通过动态进行全光视觉推理。

作者:Baoheng Zhang, Jiahui Liu, Gui Zhao · 语言:en

前往原址学习

简介

多模态大语言模型(MLLMs)在标准条件下表现出强大的视觉-语言推理能力,但在极端光照条件下表现不佳,因为RGB输入会失去不可恢复的结构和语义。我们提出Event-MLLM,一种事件增强模型,通过动态进行全光视觉推理。

返回教程库 · 察元AI产品家族