察元AI教程库 · 文章 · 排行榜

超越困惑度的语言模型评估

我们提出了一种替代方法来量化语言模型学习自然语言的能力:我们询问它们在多大程度上符合自然语言的统计特征。为回答这个问题,我们分析了语言模型生成的文本是否表现出自然语言中存在的统计特征

作者:Clara Meister, Ryan Cotterell · 语言:en

前往原址学习

简介

我们提出了一种替代方法来量化语言模型学习自然语言的能力:我们询问它们在多大程度上符合自然语言的统计特征。为回答这个问题,我们分析了语言模型生成的文本是否表现出自然语言中存在的统计特征

返回教程库 · 察元AI产品家族