察元AI教程库 · 文章 · 大模型

关于大语言模型路由中条件PAC高效推理的说明

我们研究了无分布风险控制在模型路由中的应用,受大型语言模型推理的启发。我们形式化了在“可能近似正确”保证下的逐点条件效率,并证明这会迫使一个几乎不可能实现的路由系统:在几乎所有输入点上,当快速模型超出

作者:Hao Zeng, Bingyi Jing · 语言:en

前往原址学习

简介

我们研究了无分布风险控制在模型路由中的应用,受大型语言模型推理的启发。我们形式化了在“可能近似正确”保证下的逐点条件效率,并证明这会迫使一个几乎不可能实现的路由系统:在几乎所有输入点上,当快速模型超出

返回教程库 · 察元AI产品家族