察元AI教程库 · 文章 · 部署

基于学习的协同MEC：结合软截止时间意识的LLM推理，通过Transformer增强的PPO实现

本文研究了在软截止时间约束下，用于大语言模型（LLM）推理的协作式移动边缘计算（MEC）服务器。在该系统中，为了提高服务质量，计算任务需在截止时间内完成。然而，由于任务之间的依赖关系

作者:Ngoc Hung Nguyen, Bjorn Landfeldt · 语言:en

前往原址学习

简介

本文研究了在软截止时间约束下，用于大语言模型（LLM）推理的协作式移动边缘计算（MEC）服务器。在该系统中，为了提高服务质量，计算任务需在截止时间内完成。然而，由于任务之间的依赖关系

返回教程库 · 察元AI产品家族