察元AI教程库 · 文章 · 大模型
我们使用大型语言模型LLaMA-7B作为基于过去token窗口预测下一个token的预测器，提供了英语熵的渐近上界的新估计。该估计值显著低于文献[cover1978convergent]、[luta]中现有的估计值。
作者:Chandra Shekhara Kaushik Valmeekam, Krishna Narayanan, Dileep Kalathil · 语言:en
我们使用大型语言模型LLaMA-7B作为基于过去token窗口预测下一个token的预测器，提供了英语熵的渐近上界的新估计。该估计值显著低于文献[cover1978convergent]、[luta]中现有的估计值。