MATLAB-马尔可夫链（马氏链）模型

马尔可夫链的定义

       现实世界中有很多这样的现象：某一系统在已知现在情况的条件下，系统未来时刻的情况只与现在有关，而与过去的历史无直接关系。比如，研究一个商店的累计销售额，如果现在时刻的累计销售额已知，则未来某一时刻的累计销售额与现在时刻以前的任一时刻累计销售额无关。上节中的几个例子也均属此类。描述这类随机现象的数学模型称为马氏模型。

例1  设一随机系统状态空间，记录观测系统所处状态如下：

4 3 2 1 4 3 1 1 2 3

2 1 2 3 4 4 3 3 1 1

1 3 3 2 1 2 2 2 4 4

2 3 2 3 1 1 2 4 3  1

若该系统可用马氏模型描述，估计转移概率。

解 首先将不同类型的转移数