信息熵
摘要:
如何衡量一个集合的混乱程度。假设集合有n个元素,如果n个元素都是不同的,那么集合可以说是最混乱的了,如果n个元素都是相同的,那么可以说集合是最纯净的了,如下公式可以衡量这种混乱程度。 假设集合可以分成n类,每类的个数为ci个,那么就可以用上述公式衡量该集合的混乱程度了。当集合仅有1类时,很容易得到如下结果 E = 0;当集合有n类时,那么E=-logP(1/n)=log(n),此时是混乱程度... 阅读全文
posted @ 2012-12-15 18:17 yminus 阅读(312) 评论(0) 推荐(0)
浙公网安备 33010602011771号