察元AI教程库 · 文章 · 部署

DISC:动态分解提升LLM推理的可扩展性

LLM的推理扩展方法通常依赖于将问题分解为步骤(或一组标记),然后进行采样并选择最佳的下一步。然而,这些步骤及其大小通常预先设定或基于领域知识手动设计。我们提出了一种动态分解

作者:Jonathan Light, Wei Cheng, Benjamin Riviere · 语言:en

前往原址学习

简介

LLM的推理扩展方法通常依赖于将问题分解为步骤(或一组标记),然后进行采样并选择最佳的下一步。然而,这些步骤及其大小通常预先设定或基于领域知识手动设计。我们提出了一种动态分解

返回教程库 · 察元AI产品家族