察元AI教程库 · 文章 · 大模型

超越指数衰减：重新思考大型语言模型中的误差累积问题

当前普遍认为，大型语言模型（LLM）的可靠性随序列长度呈指数下降，这一观点基于独立的每个token错误概率，暗示了长自回归输出的内在限制。我们的研究通过综合证据从根本上挑战了这一观点

作者:Mikhail L. Arbuzov, Sisong Bei, Ziwei Dong · 语言:en

前往原址学习

简介

当前普遍认为，大型语言模型（LLM）的可靠性随序列长度呈指数下降，这一观点基于独立的每个token错误概率，暗示了长自回归输出的内在限制。我们的研究通过综合证据从根本上挑战了这一观点

返回教程库 · 察元AI产品家族