察元AI教程库 · 文章 · 大模型
我们引入了“信念状态Transformer”,这是一种基于Transformer的下一个token预测器,它同时输入前缀和后缀,并提出了一种新颖的目标,即预测前缀的下一个token和后缀的前一个token。信念状态Transformer能够有效解决具有挑战性的
作者:Edward S. Hu, Kwangjun Ahn, Qinghua Liu · 语言:en
我们引入了“信念状态Transformer”,这是一种基于Transformer的下一个token预测器,它同时输入前缀和后缀,并提出了一种新颖的目标,即预测前缀的下一个token和后缀的前一个token。信念状态Transformer能够有效解决具有挑战性的