察元AI教程库 · 文章 · 智能体

EcoAgent-Bench:评估预算受限下LLM代理的经济决策能力

代理基准测试通常衡量任务完成情况,并将资源使用视为辅助统计。但在实际部署中,选择本地查找、广泛搜索、复合研究工具、更强模型或人工升级,本身就是任务的一部分。我们引入了EcoAgent-Bench,其中每个任务都包含这些决策过程。

作者:Jie Wu, Ming Gong, Feixiang Cheng · 语言:en

前往原址学习

简介

代理基准测试通常衡量任务完成情况,并将资源使用视为辅助统计。但在实际部署中,选择本地查找、广泛搜索、复合研究工具、更强模型或人工升级,本身就是任务的一部分。我们引入了EcoAgent-Bench,其中每个任务都包含这些决策过程。

返回教程库 · 察元AI产品家族