察元AI教程库 · 文章 · 大模型
大型语言 语言模型(LLMs)在自然语言处理中展现出令人印象深刻的新兴能力,但由于巨大的计算需求和封闭源代码的性质,其普及受到阻碍。近期研究通过从黑盒LLM中蒸馏知识来推动开源小型LLM的发展,为解决这一问题提供了新思路
作者:Zhaoyang Wang, Shaohan Huang, Yuxuan Liu · 语言:en
大型语言 语言模型(LLMs)在自然语言处理中展现出令人印象深刻的新兴能力,但由于巨大的计算需求和封闭源代码的性质,其普及受到阻碍。近期研究通过从黑盒LLM中蒸馏知识来推动开源小型LLM的发展,为解决这一问题提供了新思路