zz关于困惑度PPL,这一篇讲的比较清楚
https://zhuanlan.zhihu.com/p/686808564
关于困惑度PPL,这一篇讲的比较清楚
https://geek-docs.com/pytorch/pytorch-questions/35_pytorch_calculate_perplexity_in_pytorch.html
这个可以补充看一下
https://www.wbolt.com/perplexity-metric-for-llm-evaluation.html
这个讲了LLM的一些评测方法
https://zhuanlan.zhihu.com/p/664078317
这篇文章对其中的CE公式做了一些解释

浙公网安备 33010602011771号