察元AI教程库 · 文章 · 智能体

ReliabilityBench：在类似生产环境的压力下评估LLM代理的可靠性

现有用于评估工具使用型LLM代理的基准主要报告单次运行的成功率，却忽略了生产环境中所需的可靠性属性。我们引入了\textbf{ReliabilityBench}，一个用于评估代理在三个维度上的可靠性的基准：（i）在重复执行时的稳定性

作者:Aayush Gupta · 语言:en

简介