察元AI教程库 · 文章 · 排行榜

纠正LLM基准中的提示依赖性：一种基于贝叶斯层次模型与嵌入空间聚类的方法

LLM基准评估指标通常会错误地表述性能和不确定性，因为它们依赖两个在实践中经常不成立的假设：（i）有足够的评估数据用于经典推理，以及（ii）测试提示是独立的。我们提出了一种修正性的贝叶斯层次

作者:Mary Llewellyn, Isobel Thornton, James Bishop · 语言:en

简介