察元AI教程库 · 文章 · 大模型

n-gram、变换器、隐马尔可夫模型和马尔可夫链的最可能序列生成,通过滚动算法实现

本文考虑一种具有n-gram结构的Transformer模型,例如ChatGPT所依赖的模型。该Transformer模型提供下一个词的概率,可用于生成词序列。我们考虑了基于这些概率计算高度可能词序列的方法

作者:Yuchao Li, Dimitri Bertsekas · 语言:en

前往原址学习

简介

本文考虑一种具有n-gram结构的Transformer模型,例如ChatGPT所依赖的模型。该Transformer模型提供下一个词的概率,可用于生成词序列。我们考虑了基于这些概率计算高度可能词序列的方法

返回教程库 · 察元AI产品家族