察元AI教程库 · 文章 · 排行榜
语音语言模型（SpeechLMs）仅处理和生成语音数据，没有文本监督。本文我们提出TWIST，一种利用预训练文本语言模型进行warm-start训练的语音语言模型方法。我们通过自动和人工评估证明，TWIST在性能上优于现有方法。
作者:Michael Hassid, Tal Remez, Tu Anh Nguyen · 语言:en
语音语言模型（SpeechLMs）仅处理和生成语音数据，没有文本监督。本文我们提出TWIST，一种利用预训练文本语言模型进行warm-start训练的语音语言模型方法。我们通过自动和人工评估证明，TWIST在性能上优于现有方法。