察元AI教程库 · 文章 · 大模型
本文考虑一种具有n-gram结构的Transformer模型,例如ChatGPT所依赖的模型。该Transformer模型提供下一个词的概率,可用于生成词序列。我们考虑了基于这些概率计算高度可能词序列的方法
作者:Yuchao Li, Dimitri Bertsekas · 语言:en
本文考虑一种具有n-gram结构的Transformer模型,例如ChatGPT所依赖的模型。该Transformer模型提供下一个词的概率,可用于生成词序列。我们考虑了基于这些概率计算高度可能词序列的方法