马尔可夫算法

马氏模型的含义

马尔科夫链

观察式子当P{En = i，En-1 = in-1，...,} = p{En = i},n - 1之前发生的事都和现在无关

例子：


转移概率矩阵

练习：

第3条说的是不管初始状态是什么只要j趋于无穷，最后极限与初始状态无关，极限趋于一个定值
正则矩阵：1、方阵，2、逆矩阵存在

例题：
这道例题主要需要用的是时齐马氏链
关于时齐马氏链的内容如下：

---

---