察元AI教程库 · 文章 · 部署

MARLIN：面向云数据中心可持续LLM推理的多智能体博弈强化学习

大型语言模型（LLMs）在云平台中的普及程度日益提高，得益于基于AI的消费级和企业级服务的引入。LLM推理请求尤其占总LLM生命周期能耗的90%左右，远超训练能耗。该风险

作者:H. Moore, S. Qi, D. Milojicic · 语言:en

前往原址学习

简介

大型语言模型（LLMs）在云平台中的普及程度日益提高，得益于基于AI的消费级和企业级服务的引入。LLM推理请求尤其占总LLM生命周期能耗的90%左右，远超训练能耗。该风险

返回教程库 · 察元AI产品家族