PDEagle的技术博客

摘要： 先说明一下：本篇博客不是关于最大熵模型的介绍，只是对模型结果的理解。更准确地讲，是对张乐博士的maxent开源库的理解。所以，读者应按其所需选择是否继续。最大熵模型就是要在满足下面式子的前提下使得整个解的信息熵最大化。式子如下：\sum \tilde P(x) P(y|x) f(x,y) = \sum \tilde P(x,y) f(x,y)因为这里的博客似乎不支持数学公式的编写，所以我这里简单说明一下：\sum表示的是求和符号，它表示对所有实例进行求和，\tilde P表示的是训练数据集的真实概率，而P则表示理论计算的概率。x是特征，y是打的标签。x与y的同时出现表示一个可统计的特征，此时. 阅读全文