摘要: 文章目录 1. 1. 高斯模型简介1.1. 1.1. 单高斯模型1.2. 1.2. 高斯混合模型1.3. 1.3. 高斯混合模型与K-means异同点2. 2. 高斯混合模型参数估计说明(EM算法)2.1. 2.1. 明确影变量,写出完全数... 阅读全文
posted @ 2014-05-15 17:52 Mind Puzzle 阅读(7444) 评论(0) 推荐(2) 编辑
摘要: 文章目录 1. 前言 2.基础数学知识2.1.凸函数2.2.Jensen不等式 3.EM算法所解决问题的例子 4.EM算法 4.1.模型说明 4.2.EM算法推导 4.3.EM算法收敛性证明 4.4. EM算法E步说明 5.小结 6.主要... 阅读全文
posted @ 2014-04-11 20:40 Mind Puzzle 阅读(4236) 评论(8) 推荐(3) 编辑
摘要: 文章目录 1. 1. 摘要2. 2. Map-Matching(MM)问题3. 3. 隐马尔科夫模型(HMM)3.1. 3.1. HMM简述3.2. 3.2. 基于HMM的Map-Matching3.3. 3.3. Viterbi算法4.... 阅读全文
posted @ 2014-04-08 22:08 Mind Puzzle 阅读(31513) 评论(8) 推荐(8) 编辑
摘要: 据上次博客已经2周多了,一直没写,惭愧。一、高斯模型简介 首先介绍一下单高斯模型(GSM)和高斯混合模型(GMM)的大概思想。1.单高斯模型 如题,就是单个高斯分布模型or正态分布模型。想必大家都知道正态分布,这一分布反映了自然界普遍存在的有关变量的一种统计规律,例如身高,考试成绩等;而... 阅读全文
posted @ 2013-04-24 16:47 Mind Puzzle 阅读(38069) 评论(6) 推荐(6) 编辑
摘要: 一、前言 这是本人写的第一篇博客,是学习李航老师的《统计学习方法》书以及斯坦福机器学习课Andrew Ng的EM算法课后,对EM算法学习的介绍性笔记,如有写得不恰当或错误的地方,请指出,并多多包涵,谢谢。另外本人数学功底不是很好,有些数学公式我会说明的仔细点的,如果数学基础好,可直接略过。二、基础数学知识 在正式介绍EM算法之前,先介绍推导EM算法用到的数学基础知识,包括凸函数,Jensen不等式。 1.凸函数 对于凸函数,凹函数,如果大家学过高等数学,都应该知道,需要注意的是国内教材如同济大学的《高等数学》的这两个概念跟国外刚好相反,为了能更好的区别,本文章把凹凸函数称之为上凸函数,... 阅读全文
posted @ 2013-04-05 22:02 Mind Puzzle 阅读(14909) 评论(7) 推荐(3) 编辑