察元AI教程库 · 文章 · 部署

ReaLM：基于统计算法容错的可靠且高效的大型语言模型推理

对高效大型语言模型（LLM）推理的需求推动了专用加速器的发展。由于加速器易受硬件故障（如老化、变异等）影响，现有加速器设计通常保留较大的电压裕度，或采用基于算法的故障

作者:Tong Xie, Jiawang Zhao, Zishen Wan · 语言:en

前往原址学习

简介

对高效大型语言模型（LLM）推理的需求推动了专用加速器的发展。由于加速器易受硬件故障（如老化、变异等）影响，现有加速器设计通常保留较大的电压裕度，或采用基于算法的故障

返回教程库 · 察元AI产品家族