马克洛夫链

商业生态系统研究-硕士论文笔记

20211222 

Excel计算马尔科夫的简单方法 - GameRes游资网

定义：马尔可夫性质（英语：Markov property）是概率论中的一个概念，因為俄國數學家安德雷·馬可夫得名。在给定现在状态时，它与过去状态（即该过程的历史路径）是条件独立的，那么此随机过程即具有马尔可夫性质。具有马尔可夫性质的过程通常称之为马尔可夫过程。

• 计算下一时刻出现某种状态的概率
  • 初始状态 * 转换概率矩阵
  • N时刻状态：0，1，0（不存在概率分布，属于确定情况1发生或0不发生）
  • 转化概率矩阵需要自定义，从一个状态到另一个状态的概率

 

 

无穷个周期后概率会趋于定值，stationary matrix。但不是所有的马克洛夫链都会趋于定值。