察元AI教程库 · 文章 · 部署

PICNIC:基于硅光子互连芯片片的计算网络与内存计算,用于LLM推理加速

本文提出了一种基于3D堆叠芯片片的大型语言模型(LLM)推理加速器,由非易失性内存计算处理单元(PEs)和处理单元间计算网络(IPCN)组成,通过硅光子互连,有效解决了通信瓶颈。

作者:Yue Jiet Chong, Yimin Wang, Zhen Wu · 语言:en

前往原址学习

简介

本文提出了一种基于3D堆叠芯片片的大型语言模型(LLM)推理加速器,由非易失性内存计算处理单元(PEs)和处理单元间计算网络(IPCN)组成,通过硅光子互连,有效解决了通信瓶颈。

返回教程库 · 察元AI产品家族