摘要：最近学习整理相关算法，发现EM算法和MLE估计都是十分优秀的算法。 首先最大似然估计是一种已知结果，通过改变参数theta使得这种结果出现的可能性最大。 而EM算法则是可以解决含有隐藏变量的问题。举个大家都用的例子，就是我们要统计某学校男女同学的身高，如果我们可以区分男女同学，那么用最大似然估计即可 阅读全文

摘要：判别式模型（Discriminative Model）是直接对条件概率p(y|x;θ)建模。常见的判别式模型有 线性回归模型、线性判别分析、支持向量机SVM、神经网络等。 生成式模型（Generative Model）则会对x和y的联合分布p(x,y)建模，然后通过贝叶斯公式来求得p(yi|x)，然 阅读全文

摘要：http://jingyan.baidu.com/article/75ab0bcbee4b47d6864db2fc.html 阅读全文