察元AI教程库 · 文章 · 多模态

基于多模态语言大模型的语义一致视频到音频生成

现有工作在视频生成方面已取得进展，但缺乏音效（SFX）和背景音乐（BGM）会阻碍完整的沉浸式体验。我们引入了一种新颖的语义一致的视频到音频生成框架，即SVA，能够自动生成音频

作者:Gehui Chen, Guan'an Wang, Xiaowen Huang · 语言:en

简介