Notes 4-Markov Chain- computing methods of stationary distribution

稳态分布的计算

对于有限状态数量的稳态分布计算

Method 1：

将系统状态矩阵代入稳态分布的公式中，

解方程即可：

Method 2：

对于较少状态数量，直接计算转移概率矩阵的极限，如果收敛于一个矩阵的话，那么里面的每一行都是稳态分布。

对于无限状态数量的稳态分布计算

因为状态数量无限时，就不可能用解方程组或者求极限的当时来算稳态分布了。这个时候，就像高数里面推导等比数列通项公式一样，我们可以从状态转移图里面发现一些“规律”来通用的表示某些时刻的瞬时概率。