察元AI教程库 · 文章 · 排行榜
语音语言模型(SLMs)通常将语音离散化为从SSL语音模型提取的高帧率tokens。由于最成功的语言模型基于Transformer架构,处理这些长token流时使用自注意力机制会带来高昂的开销,因为注意力机制随序列长度呈二次增长
作者:Nicholas Lee, Cheol Jun Cho, Alan W Black · 语言:en
语音语言模型(SLMs)通常将语音离散化为从SSL语音模型提取的高帧率tokens。由于最成功的语言模型基于Transformer架构,处理这些长token流时使用自注意力机制会带来高昂的开销,因为注意力机制随序列长度呈二次增长