察元AI教程库 · 文章 · 部署

CE-CoLLM：通过云-边协作实现高效且自适应的大语言模型（LLM）

大型语言模型（LLMs）展现出卓越的人类类预测能力。然而，将LLMs部署到边缘进行高效且自适应的推理服务仍然具有挑战性。本文提出了一种新型的云-边协作框架（CE-CoLLM），以应对这些挑战

作者:Hongpeng Jin, Yanzhao Wu · 语言:en

前往原址学习

简介

大型语言模型（LLMs）展现出卓越的人类类预测能力。然而，将LLMs部署到边缘进行高效且自适应的推理服务仍然具有挑战性。本文提出了一种新型的云-边协作框架（CE-CoLLM），以应对这些挑战

返回教程库 · 察元AI产品家族