[数学建模]马氏链模型(一)基本介绍

马氏链是一个随机过程

由第n部的状态i 第m部 转移到 状态 j 的概率 与 n部之前的概率是无关的 ,  我们称为马氏链

如果n部概率与时间无关, 那么成为齐时性的马氏链

给出一个简单的马氏链应用,  a是一条 E属于 0,1 空间的马氏链,

我们的一步转移矩阵可以求出:

a1='1110010011111110011110111111001111111110001101101'; 
a2='111011011010111101110111101111110011011111100111'; 
a=[a1 a2]; 
f00=length(findstr('00',a)) 
f01=length(findstr('01',a)) 
f10=length(findstr('10',a)) 
f11=length(findstr('11',a))