察元AI教程库 · 文章 · 智能体

CAR-bench:评估LLM代理在现实世界不确定性下的一致性与局限意识

现有针对大语言模型(LLM)代理的任务基准主要关注理想化环境下的任务完成,却忽略了在现实世界、面向用户的应用中的可靠性。在诸如车载语音助手这样的领域,用户通常会发出不完整或模糊的请求,从而产生内在的不确定性

作者:Johannes Kirmayr, Lukas Stappen, Elisabeth André · 语言:en

前往原址学习

简介

现有针对大语言模型(LLM)代理的任务基准主要关注理想化环境下的任务完成,却忽略了在现实世界、面向用户的应用中的可靠性。在诸如车载语音助手这样的领域,用户通常会发出不完整或模糊的请求,从而产生内在的不确定性

返回教程库 · 察元AI产品家族