察元AI教程库 · 文章 · 排行榜

通过音节语音分词扩展语音语言模型

语音语言模型(SLMs)通常将语音离散化为从SSL语音模型提取的高帧率tokens。由于最成功的语言模型基于Transformer架构,处理这些长token流时使用自注意力机制会带来高昂的开销,因为注意力机制随序列长度呈二次增长

作者:Nicholas Lee, Cheol Jun Cho, Alan W Black · 语言:en

前往原址学习

简介

语音语言模型(SLMs)通常将语音离散化为从SSL语音模型提取的高帧率tokens。由于最成功的语言模型基于Transformer架构,处理这些长token流时使用自注意力机制会带来高昂的开销,因为注意力机制随序列长度呈二次增长

返回教程库 · 察元AI产品家族