察元AI教程库 · 文章 · 大模型

污染会提升分数但很少重新排序大语言模型排行榜

基准污染，即测试项目泄露到训练数据中，被广泛认为是威胁大型语言模型（LLM）排行榜可靠性的威胁。我们认为，这一担忧混淆了两个不同的问题：污染是否会使绝对分数膨胀，以及是否会导致排名顺序

作者:Xingyao Xiao, Yihong Cheng · 语言:en

前往原址学习

简介

基准污染，即测试项目泄露到训练数据中，被广泛认为是威胁大型语言模型（LLM）排行榜可靠性的威胁。我们认为，这一担忧混淆了两个不同的问题：污染是否会使绝对分数膨胀，以及是否会导致排名顺序

返回教程库 · 察元AI产品家族