马尔科夫性质/无后效性——从案例看定义

马尔科夫性质/无后效性

马尔科夫决策过程（Markov Decision Process），动态规划（Dynamic Programming）的基础都是马尔科夫性质/无后效性。简言之，*未来与过去无关，只和现在有关 *
即：
P ( X n + 1 ∣ X 0 , . . . , X n ) = P ( X n + 1 ∣ X n ) P({X_{n+1}|X_0, . . . , X_n}) = P({X_{n+1}|X_n} ) P(X