察元AI教程库 · 文章 · 大模型

缓解大型语言模型评估的偏差

近年来，评估大型语言模型（LLM）质量的趋势是采用“LLM作为裁判”（LLM-as-a-Judge）的方式，即利用另一个LLM来评估当前输出的质量。然而，现有裁判被证明存在偏差，即它们会偏好那些表面更优的答案。

作者:Hongli Zhou, Hui Huang, Yunfei Long · 语言:en

前往原址学习

简介

近年来，评估大型语言模型（LLM）质量的趋势是采用“LLM作为裁判”（LLM-as-a-Judge）的方式，即利用另一个LLM来评估当前输出的质量。然而，现有裁判被证明存在偏差，即它们会偏好那些表面更优的答案。

返回教程库 · 察元AI产品家族