察元AI教程库 · 文章 · 排行榜

在大型语言模型基准中量化排序不确定性

预训练模型通常通过多任务排行榜来评估其在不同任务上的表现效果。最近引入了排名置信区间,作为一种量化这些排名中不确定性的方法,通过聚合成对假设检验来实现。本文我们分析了

作者:Bitya Neuhof, Yuval Benjamini · 语言:en

前往原址学习

简介

预训练模型通常通过多任务排行榜来评估其在不同任务上的表现效果。最近引入了排名置信区间,作为一种量化这些排名中不确定性的方法,通过聚合成对假设检验来实现。本文我们分析了

返回教程库 · 察元AI产品家族