察元AI教程库 · 文章 · 提示词

PRISM:基于精确率-召回率的无数据知识蒸馏,通过生成扩散实现

无数据的知识蒸馏(DFKD)在没有访问真实分布(ID)数据的情况下,将知识从教师模型转移到学生模型。尽管现有方法在小规模图像上表现良好,但在合成大规模图像时会出现模式崩溃问题,导致知识转移有限

作者:Xuewan He, Jielei Wang, Zihan Cheng · 语言:en

前往原址学习

简介

无数据的知识蒸馏(DFKD)在没有访问真实分布(ID)数据的情况下,将知识从教师模型转移到学生模型。尽管现有方法在小规模图像上表现良好,但在合成大规模图像时会出现模式崩溃问题,导致知识转移有限

返回教程库 · 察元AI产品家族