察元AI教程库 · 文章 · 排行榜
大型语言模型通常通过标准基准测试得分来评判,但这些得分往往高估了其真实能力,因为它们掩盖了任务实际所需的各种技能混合。例如,ARC被假定为测试推理能力,而HellaSwag则旨在评估常识。然而,我们
作者:Dongjun Kim, Gyuho Shim, Yongchan Chun · 语言:en
大型语言模型通常通过标准基准测试得分来评判,但这些得分往往高估了其真实能力,因为它们掩盖了任务实际所需的各种技能混合。例如,ARC被假定为测试推理能力,而HellaSwag则旨在评估常识。然而,我们