察元AI教程库 · 文章 · 微调
微调大型语言模型(LLMs)通常依赖于生成大量输入-输出对。然而,对于一个给定的问题,可能存在许多有效的输出。在实践中,这些输出通常通过从教师模型中提炼知识获得,且会因具体教师模型的不同而有所变化
作者:Xuan Ren, Qi Chen, Lingqiao Liu · 语言:en
微调大型语言模型(LLMs)通常依赖于生成大量输入-输出对。然而,对于一个给定的问题,可能存在许多有效的输出。在实践中,这些输出通常通过从教师模型中提炼知识获得,且会因具体教师模型的不同而有所变化