先转来两篇文章:
这篇讲马尔科夫链的
http://www.cnblogs.com/daniel-D/p/3388724.html
后续会研究BP算法
http://www.cnblogs.com/daniel-D/archive/2013/06/03/3116278.html
BP 算法之一种直观的解释
正文
马尔可夫过程的定义:
⑴设
是一个随机过程,如果在
在
时刻所处的状态为已知时,与它在时刻
之前所处的状态无关,则称具有马尔可夫性。
则称
为
马尔可夫过程。