察元AI教程库 · 文章 · 大模型

信念状态Transformer

我们引入了“信念状态Transformer”,这是一种基于Transformer的下一个token预测器,它同时输入前缀和后缀,并提出了一种新颖的目标,即预测前缀的下一个token和后缀的前一个token。信念状态Transformer能够有效解决具有挑战性的

作者:Edward S. Hu, Kwangjun Ahn, Qinghua Liu · 语言:en

前往原址学习

简介

我们引入了“信念状态Transformer”,这是一种基于Transformer的下一个token预测器,它同时输入前缀和后缀,并提出了一种新颖的目标,即预测前缀的下一个token和后缀的前一个token。信念状态Transformer能够有效解决具有挑战性的

返回教程库 · 察元AI产品家族