马尔可夫链为状态空间中从一个状态到另一个状态转换的随机过程。该过程要求具备“无记忆”的性质:即已知现在状态,将来状态与过去状态相互独立。这种特定类型的“无记忆性”称作马尔可夫性质。在马尔可夫链的每一步,系统根据条件概率保持现有状态或转为其他状态。状态的改变叫做转移,状态改变概率称为转移概率。
1
2
3
马尔可夫链为状态空间中从一个状态到另一个状态转换的随机过程。该过程要求具备“无记忆”的性质:即已知现在状态,将来状态与过去状态相互独立。这种特定类型的“无记忆性”称作马尔可夫性质。在马尔可夫链的每一步,系统根据条件概率保持现有状态或转为其他状态。状态的改变叫做转移,状态改变概率称为转移概率。
1
2
3