察元AI教程库 · 文章 · 大模型

变换器中的世界建模

行为故障可能导致Transformer看起来缺乏世界模型，即使它已经学习了环境的忠实表示。我们在TaxiGPT中展示了这一点，这是一个在曼哈顿随机行走中训练的Transformer，其失败被解释为内在一致性缺失的证据

作者:Pierre Beckmann, Matthieu Queloz, Andre Freitas · 语言:en

简介