马尔可夫过程

马尔可夫过程的定义

平稳过程的平稳性保证了未来可以通过过去来预知。而马尔科夫是这样的一类过程，即未来只与现在有关，与过去无关。就是你的过去是什么样子不重要，未来只与自己当下的努力有关。我们只需要知道当前的信息就够了。

举一个实际例子比如说卖电脑，可能当初你买的电脑花了上万块钱，现在可能只值几百块钱了。我们在卖电脑的时候不会去考虑那个电脑过去值多少钱。而只是考虑当下的价值。再比如说流感病毒的传播，未来感染病毒的人数只依赖于目前感染病毒的人数，而与之前感染病毒的历史人数无关。这种已知“现在”的条件下，过程“将来”的演变与“过去”无关的性质，称之为无后效性或者马尔可夫性。具有无后效性的过程称为马尔科夫过程。