Why is a Markov Chain important? It is important because of its stationary distribution.马尔科夫链随机过程之所以如此重要，在于其平稳分布（stationary distribution）。记号的说明q(i,j)==q(j|i)==q(i→j)q(i, j) == q(j|i) == q(i\rightarrow

连续时间：马尔科夫随机过程；离散时间：马尔科夫链；在物理学中，很多确定性现象遵从如下演变规则：由时刻 t0t_0 系统或过程所处的状态，（就）可以决定系统或过程在时刻 t>t0t > t_0 所处的状态，而无需借助于 t0t_0 以前（不需要更多的更久之前的信息）系统或过程所处状态的历史资料。如微分方程初值问题所描绘的物理过程就属于这类确定性现象。把上述原则延伸到随机现象，即当一物理系统或过程遵

维纳过程又叫布朗运动过程（Brownian motion）；1. 维纳过程维纳过程 WtW_t 由如下性质所描述：W0=1, a.s.（a.s.，almost surely）

1. 定义 设 (Ω,F,P) 是一个概率空间，对每个 t∈T（时间集），Xt(w) 是定义在其上取值于 (S,B) 上的随机变量（每一个不同的 t，对应一个不同的随机变量，随机过程是随机变量关于时间的函数），则称 {Xt;t∈T}为 T 上的一个随机过程。