摘要: 熵的定义:无损编码事件信息的最小平均编码长度 事件$P_i$ 编码长度$-log_2P_i$ 发生概率$P_i$ 一个分布的熵的总和 $$ -\sum_iP_ilog_2(P_i) $$ 考虑只有预估的概率分布$Q$ 考虑$Q$对于将要发生的$P$进行编码的最小平均长度 即是: $$ -\sum_i 阅读全文
posted @ 2023-09-04 19:23 After_rain 阅读(75) 评论(1) 推荐(0)