Markov Chain马尔可夫链

马尔可夫链是一种随机变量集合,当前状态仅依赖于前一个状态。文章介绍了马尔可夫链的概念、转移理论,并通过代码实例展示其收敛特性。最后讨论了马尔可夫链收敛所需的条件,包括有限状态数、状态间连通性、固定转移概率和非周期性等。
摘要由CSDN通过智能技术生成

Markov Chain马尔可夫链

一、简介

1.百度百科中给的定义是 :马尔可夫链是一组具有马尔可夫性质的离散随机变量的集合。

数学表达如下:

对于概率空间的随机变量集合X,随机变量的取值在可数集 s ∈ Z s\in\mathbb{Z} sZ内,
p ( X t + 1 ∣ X t , . . . , X 1 ) = p ( X t + 1 ∣ X t ) p(X_{t+1}|X_t,...,X_1)=p(X_{t+1}|X_t) p(Xt+1Xt,...,X1)=p(Xt+1

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值