摘要： 转自：http://blog.sina.com.cn/s/blog_6e85bf420100ohma.html信息熵就是一组数据包含的信息，概率的度量。一组数据越有序信息熵也就越低，极端时如果一组数据中只有一个非0，其它都是0，那么熵等于0，因为只有可能是这个非0的情况发生，它给人们的信息已经确定了... 阅读全文