察元AI教程库 · 文章 · 智能体

SpecBox：一种用于高效LLM智能体服务的推测沙箱调度方法

随着LLM代理越来越多地依赖模型上下文协议（MCP）来调用隔离的外部沙箱，分散式沙箱部署引入了资源利用率与交互延迟之间的根本矛盾。持久的长生命周期沙箱预留会导致内存过度占用

作者:Yihui Zhang, Tianyu Wo, Jinghao Wang · 语言:en

简介