察元AI教程库 · 文章 · 部署

基于能量采集的边缘网络去中心化LLM推理

大型语言模型已显著改变了多个领域，尤其是在自然语言任务中的表现卓越，但在资源受限的环境（如边缘网络）中的部署仍面临持续挑战。去中心化的推理技术应运而生，实现了分布式部署。

作者:Aria Khoshsirat, Giovanni Perin, Michele Rossi · 语言:en

简介