察元AI教程库 · 文章 · 大模型

PLDR-LLM：基于幂律解码表示的大型语言模型

我们提出了基于幂律解码表示的语言模型（PLDR-LLM），该语言模型通过幂律图注意力机制实现非线性和线性变换，从而生成明确的演绎和归纳输出。我们预训练了不同层数的PLDR-LLM。

作者:Burc Gokden · 语言:en

前往原址学习

简介

我们提出了基于幂律解码表示的语言模型（PLDR-LLM），该语言模型通过幂律图注意力机制实现非线性和线性变换，从而生成明确的演绎和归纳输出。我们预训练了不同层数的PLDR-LLM。

返回教程库 · 察元AI产品家族