察元AI教程库 · 文章 · 多模态

DiaDem:面向多模态大语言模型的音频视觉视频字幕对话描述进展

在音视频视频字幕中准确描述对话对于下游的理解和生成任务至关重要。然而,现有模型通常难以在音视频字幕中生成忠实的对话描述。为缓解这一局限,我们提出了DiaDem,一个强大的音频视频对话描述模型。

作者:Xinlong Chen, Weihong Lin, Jingyun Hua · 语言:en

前往原址学习

简介

在音视频视频字幕中准确描述对话对于下游的理解和生成任务至关重要。然而,现有模型通常难以在音视频字幕中生成忠实的对话描述。为缓解这一局限,我们提出了DiaDem,一个强大的音频视频对话描述模型。

返回教程库 · 察元AI产品家族