察元AI教程库 · 文章 · 大模型

Pangu Ultra:在昇腾NPU上推动密集型大语言模型的边界

我们提出了Pangu Ultra,一个拥有1350亿参数、采用密集Transformer模块并基于昇腾神经网络处理器(NPU)训练的大型语言模型(LLM)。尽管近年来LLM领域在推动模型规模和能力方面取得了前所未有的进展,但训练

作者:Yichun Yin, Wenyong Huang, Kaikai Song · 语言:en

前往原址学习

简介

我们提出了Pangu Ultra,一个拥有1350亿参数、采用密集Transformer模块并基于昇腾神经网络处理器(NPU)训练的大型语言模型(LLM)。尽管近年来LLM领域在推动模型规模和能力方面取得了前所未有的进展,但训练

返回教程库 · 察元AI产品家族