察元AI教程库 · 文章 · 排行榜

措辞效应:量化大语言模型基准性能中的双向漂移

基准分数来自每个问题的单一表述。这个单一表述被当作整个问题所有可能表述的代表,但实际上并非如此。我们表明,当问题重新表述但保持其含义和答案不变时,模型的输出答案通常会发生翻转

作者:Shailja Thakur, Sungeun An, Chad DeLuca · 语言:en

前往原址学习

简介

基准分数来自每个问题的单一表述。这个单一表述被当作整个问题所有可能表述的代表,但实际上并非如此。我们表明,当问题重新表述但保持其含义和答案不变时,模型的输出答案通常会发生翻转

返回教程库 · 察元AI产品家族