察元AI教程库 · 文章 · 大模型

中文微小大语言模型:预训练一个以中文为中心的大语言模型

在本研究中,我们引入了CT-LLM,一个20亿参数的大型语言模型(LLM),展示了在开发LLM时优先考虑中文语言的重要转变。该模型从零开始构建,与传统方法不同,主要采用中文文本数据,充分利用了中文语料的丰富性

作者:Xinrun Du, Zhouliang Yu, Songyang Gao · 语言:en

前往原址学习

简介

在本研究中,我们引入了CT-LLM,一个20亿参数的大型语言模型(LLM),展示了在开发LLM时优先考虑中文语言的重要转变。该模型从零开始构建,与传统方法不同,主要采用中文文本数据,充分利用了中文语料的丰富性

返回教程库 · 察元AI产品家族