察元AI教程库 · 文章 · 多模态

运动作为提示:通过运动引导的跨帧视觉提示增强多模态大语言模型的运动推理能力

以运动为中心的视频推理是机器人操作和自主导航等交互应用的基础。然而,多模态大语言模型(MLLMs)通常通过稀疏均匀采样处理视频,以控制视觉令牌和注意力成本。这种策略可能

作者:Xikai Sun, Kebin Liu, Haotian Wang · 语言:en

前往原址学习

简介

以运动为中心的视频推理是机器人操作和自主导航等交互应用的基础。然而,多模态大语言模型(MLLMs)通常通过稀疏均匀采样处理视频,以控制视觉令牌和注意力成本。这种策略可能

返回教程库 · 察元AI产品家族