察元AI教程库 · 文章 · 排行榜

Don't Pass@k：大语言模型评估的贝叶斯框架

Pass$@k$被广泛用于报告LLM的推理性能，但通常会产生不稳定且可能误导的排名，尤其是在试验次数（样本）有限且计算资源受限的情况下。我们提出了一种基于贝叶斯的评估框架来

作者:Mohsen Hariri, Amirhossein Samandar, Michael Hinczewski · 语言:en

前往原址学习

简介

Pass$@k$被广泛用于报告LLM的推理性能，但通常会产生不稳定且可能误导的排名，尤其是在试验次数（样本）有限且计算资源受限的情况下。我们提出了一种基于贝叶斯的评估框架来

返回教程库 · 察元AI产品家族