察元AI教程库 · 文章 · 大模型

Meltemi:首个面向希腊语的开源大型语言模型

我们描述了Meltemi 7B的开发过程和能力,这是首个面向希腊语的开源大型语言模型(LLM)。Meltem 7B拥有70亿参数,基于一个400亿token的希腊语语料库进行训练。在开发Meltemi 7B时,我们基于Mistral进行了调整,通过在希腊语语料上进行连续预训练

作者:Leon Voukoutis, Dimitris Roussis, Georgios Paraskevopoulos · 语言:en

前往原址学习

简介

我们描述了Meltemi 7B的开发过程和能力,这是首个面向希腊语的开源大型语言模型(LLM)。Meltem 7B拥有70亿参数,基于一个400亿token的希腊语语料库进行训练。在开发Meltemi 7B时,我们基于Mistral进行了调整,通过在希腊语语料上进行连续预训练

返回教程库 · 察元AI产品家族