察元AI教程库 · 文章 · 大模型

CogniBench:一个受法律启发的框架和数据集,用于评估大语言模型的认知忠实度

忠实性幻觉是指大型语言模型(LLM)生成的声明,这些声明并未由提供给LLM的上下文支持。由于缺乏评估标准,现有基准主要关注“事实性陈述”,即对源材料进行重新表述的陈述,而忽略了涉及推理的“认知性陈述”

作者:Xiaqiang Tang, Jian Li, Keyu Hu · 语言:en

前往原址学习

简介

忠实性幻觉是指大型语言模型(LLM)生成的声明,这些声明并未由提供给LLM的上下文支持。由于缺乏评估标准,现有基准主要关注“事实性陈述”,即对源材料进行重新表述的陈述,而忽略了涉及推理的“认知性陈述”

返回教程库 · 察元AI产品家族