察元AI教程库 · 文章 · 大模型

大型语言模型路由中的误差感知反向拍卖机制

将每个查询路由到成本效益高的大型语言模型（LLM）对于平衡质量和成本至关重要，但大多数路由器依赖于一个中央任务中心来预测模型性能，这在模型池扩大时造成了信息风险错配和可扩展性瓶颈。我们提出了一种标记

作者:Haolong Chen, Zhengyuan Xin, Liang Zhang · 语言:en

简介