察元AI教程库 · 文章 · 大模型

SnakModel:训练一个开放的丹麦大型语言模型的实践经验

我们提出了SnakModel,这是一个基于Llama2-7B的丹麦语大型语言模型(LLM),我们持续在136亿个丹麦语词上进行预训练,并在370万条丹麦语指令上进行进一步微调。由于针对小语种社区创建LLM的最佳实践尚未建立,我们研究了其影响。

作者:Mike Zhang, Max Müller-Eberstein, Elisa Bassignana · 语言:en

前往原址学习

简介

我们提出了SnakModel,这是一个基于Llama2-7B的丹麦语大型语言模型(LLM),我们持续在136亿个丹麦语词上进行预训练,并在370万条丹麦语指令上进行进一步微调。由于针对小语种社区创建LLM的最佳实践尚未建立,我们研究了其影响。

返回教程库 · 察元AI产品家族