察元AI教程库 · 文章 · 大模型

保护隐私的变换器：SwiftKey的差分隐私实现

本文介绍了在SwiftKey中使用差分隐私（DP）训练Transformer进行语言建模。我们进行了多次实验，以平衡模型大小、运行速度和准确性之间的权衡。我们发现，在下一个词预测和准确性方面，我们获得了小而一致的提升

作者:Abdelrahman Abouelenin, Mohamed Abdelrehim, Raffy Fahim · 语言:en

简介