察元AI教程库 · 文章 · 微调

评估随机种子对大语言模型微调的宏观与微观影响

尽管随机种子在微调大型语言模型（LLMs）中的影响潜力巨大，但其对模型性能的影响一直被忽视。本研究系统评估了随机种子对LLMs在GLUE和SuperGLUE基准上的影响。我们分析了宏观层面的

作者:Nghia Bui, Guergana Savova, Lijing Wang · 语言:en

简介