马尔可夫链 （Markov Chain）

公式看起来会比较复杂，但是说白了就是 马尔可夫链就是这样一个过程，它将来的状态分布只取决于现在，跟过去无关。
通俗解释可以看这个博客，博主写的很好。
https://blog.csdn.net/carmencsdsndsiw9e3f/article/details/70236685?locationNum=10&fps=1