察元AI教程库 · 文章 · 智能体

功能等效工具在LLM代理中的延迟-质量路由

工具增强的LLM代理越来越多地通过多个功能等效的提供者访问同一工具类型，例如网页搜索API、检索器或通过共享接口暴露的LLM后端。这在运行时负载下引发了提供者路由问题：路由必须在多个提供者之间进行选择

作者:Kexin Chu, Dawei Xiang, Wei Zhang · 语言:en

简介