察元AI教程库 · 文章 · 提示词
无数据的知识蒸馏(DFKD)在没有访问真实分布(ID)数据的情况下,将知识从教师模型转移到学生模型。尽管现有方法在小规模图像上表现良好,但在合成大规模图像时会出现模式崩溃问题,导致知识转移有限
作者:Xuewan He, Jielei Wang, Zihan Cheng · 语言:en
无数据的知识蒸馏(DFKD)在没有访问真实分布(ID)数据的情况下,将知识从教师模型转移到学生模型。尽管现有方法在小规模图像上表现良好,但在合成大规模图像时会出现模式崩溃问题,导致知识转移有限