察元AI教程库 · 文章 · 微调
将大型语言模型（LLMs）适应低资源语言仍是一个主要挑战，由于数据稀缺和跨语言漂移。本研究提出了Qwen2.5-3B对藏语的两阶段适应，藏语是一种形态丰富且代表性不足的语言。我们采用持续预训练（CPT）来
作者:Lifeng Chen, Ryan Lai, Tianming Liu · 语言:en
将大型语言模型（LLMs）适应低资源语言仍是一个主要挑战，由于数据稀缺和跨语言漂移。本研究提出了Qwen2.5-3B对藏语的两阶段适应，藏语是一种形态丰富且代表性不足的语言。我们采用持续预训练（CPT）来