察元AI教程库 · 文章 · 智能体

ToolMenuBench:用于评估LLM代理工具-菜单过滤策略的基准测试

工具增强的大语言模型(LLM)智能体越来越多地在大型工具库上运行,但现有评估通常只关注模型能否正确调用工具,而忽略了工具菜单如何影响可靠性、效率以及与安全相关的风险暴露。我们引入了ToolMenuB

作者:Rahul Suresh Babu, Laxmipriya Ganesh Iyer · 语言:en

前往原址学习

简介

工具增强的大语言模型(LLM)智能体越来越多地在大型工具库上运行,但现有评估通常只关注模型能否正确调用工具,而忽略了工具菜单如何影响可靠性、效率以及与安全相关的风险暴露。我们引入了ToolMenuB

返回教程库 · 察元AI产品家族