siranlee

摘要： 马氏链的长程性质主要关心马氏链在一段长时间的转移后，在每个状态上停留过的时间的比例，这个比例被称为长程比例，也就是常说的平稳概率，而马氏链的极限概率指的是转移矩阵在长时间演变后的一个极限。 ### 马氏链的长程性质 马氏链长程性质关心的是在长时间后，马氏链在每个状态上停留过的时间比例。这个时间比例可 阅读全文

摘要： 可达和互通 如果$P_{ij}^n>0$，则说状态$i$可达状态$j$; 并且如果$P_{ji}^m>0$则说状态$i,j$是互通的，记为$i\leftrightarrow j$ 状态类 根据互通的概念，将互通的两个状态划分到一个状态类中，并且根据互通的传递性可以知道，不同的状态类要么相等，要么不相 阅读全文