察元AI教程库 · 文章 · 排行榜

迈向可复现的大语言模型评估：量化大语言模型基准分数中的不确定性

大型语言模型（LLMs）是随机的，即使在温度设为零且使用固定随机种子的情况下，也不是所有模型都能给出确定性答案。然而，很少有基准研究尝试量化不确定性，部分原因是重复实验所需的时间和成本。我们使用基准设计

作者:Robert E. Blackwell, Jon Barry, Anthony G. Cohn · 语言:en

前往原址学习

简介

大型语言模型（LLMs）是随机的，即使在温度设为零且使用固定随机种子的情况下，也不是所有模型都能给出确定性答案。然而，很少有基准研究尝试量化不确定性，部分原因是重复实验所需的时间和成本。我们使用基准设计

返回教程库 · 察元AI产品家族