察元AI教程库 · 文章 · 智能体
面向LLM代理工作流的成本感知推测执行:一种五维集成方法
LLM代理工作流串联模型调用和工具调用,其实际运行时间中大部分都花费在等待上游操作完成,才能启动下游操作。通过预测上游输入并提前启动下游操作,推测执行可以回收这些空闲时间,但每个
作者:Faisal Fareed · 语言:en
前往原址学习
简介
LLM代理工作流串联模型调用和工具调用,其实际运行时间中大部分都花费在等待上游操作完成,才能启动下游操作。通过预测上游输入并提前启动下游操作,推测执行可以回收这些空闲时间,但每个
返回教程库 · 察元AI产品家族