察元AI教程库 · 文章 · 排行榜
测试集污染,即基准测试中的测试数据意外进入新模型的训练集中,是公平评估LLM的已知障碍,可能导致基准迅速过时。为缓解这一问题,许多近期的基准通过人类或LLM判断者众包新提示和评估
作者:Colin White, Samuel Dooley, Manley Roberts · 语言:en
测试集污染,即基准测试中的测试数据意外进入新模型的训练集中,是公平评估LLM的已知障碍,可能导致基准迅速过时。为缓解这一问题,许多近期的基准通过人类或LLM判断者众包新提示和评估