察元AI教程库 · 文章 · 提示词
知识蒸馏（KD）加速了大型语言模型（LLMs）的训练，但同时也带来了知识产权保护和LLM多样性风险。现有的基于自身份或输出相似性的KD检测方法容易通过提示工程被规避。我们提出了一种KD检测框架。
作者:Pingzhi Li, Morris Yu-Chao Huang, Zhen Tan · 语言:en
知识蒸馏（KD）加速了大型语言模型（LLMs）的训练，但同时也带来了知识产权保护和LLM多样性风险。现有的基于自身份或输出相似性的KD检测方法容易通过提示工程被规避。我们提出了一种KD检测框架。