察元AI教程库 · 文章 · 排行榜
对大型语言模型(LLMs)进行全面评估仍然是一个开放的研究问题。现有的评估依赖于通过贪婪解码生成的确定性点估计。然而,我们发现确定性评估无法捕捉模型的完整输出分布,导致评估结果不准确
作者:Yan Scholten, Stephan Günnemann, Leo Schwinn · 语言:en
对大型语言模型(LLMs)进行全面评估仍然是一个开放的研究问题。现有的评估依赖于通过贪婪解码生成的确定性点估计。然而,我们发现确定性评估无法捕捉模型的完整输出分布,导致评估结果不准确