察元AI教程库 · 文章 · 排行榜

使用项目反应理论审计LLM基准

LLM基准标签在发布时即被冻结，并静默传播到下游的基准、错误和所有内容。我们引入了一种基于项目反应理论的指标，在七个偏好和多项选择基准的前200个示例中，以95%的精确度发现潜在的错误标签，使用res

作者:Sander Land, Daniel M. Bikel · 语言:en

简介