深度学习-信息论中的熵

1.信息熵

 

 2.交叉熵

 

 3.3相对熵——可以验证分布的一致性

 

 

 

 4. JS散度

 

 5.联合熵

 

posted @ 2022-12-05 20:44  上虞牧之  阅读(27)  评论(0)  编辑  收藏  举报