察元AI教程库 · 文章 · 排行榜

钻探与制造测试（DDFT）：一种用于衡量大语言模型认知鲁棒性的协议

当前的语言模型评估测量了模型在理想条件下的知识，但无法评估它们在现实压力下知识的稳健性。静态基准如MMLU和TruthfulQA无法区分一个缺乏知识的模型与一个其验证机制在信息退化时崩溃的模型。

作者:Rahul Baxi · 语言:en

简介