察元AI教程库 · 文章 · 大模型
我们提出了SnakModel,这是一个基于Llama2-7B的丹麦语大型语言模型(LLM),我们持续在136亿个丹麦语词上进行预训练,并在370万条丹麦语指令上进行进一步微调。由于针对小语种社区创建LLM的最佳实践尚未建立,我们研究了其影响。
作者:Mike Zhang, Max Müller-Eberstein, Elisa Bassignana · 语言:en
我们提出了SnakModel,这是一个基于Llama2-7B的丹麦语大型语言模型(LLM),我们持续在136亿个丹麦语词上进行预训练,并在370万条丹麦语指令上进行进一步微调。由于针对小语种社区创建LLM的最佳实践尚未建立,我们研究了其影响。