蒙特卡洛法(二)

马尔科夫链

1 定义

  考虑一个随机变量构成的序列X=({X0,X1,X2,\cdots ,Xt,\cdots }),Xt表示t时刻的随机变量,t=0,1,2,3……。随机变量可以是离散的,也可以是连续的。以上随机变量的序列构成随机过程。

  在时刻0的随机变量X0遵循概率密度分布P(X0),称为初始状态分布。在某一时刻(t>=1)的随机变量Xt只依赖于Xt-1,而不依赖于过去的随机变量{X0,X1,……Xt-2},这性质称为马尔可夫性。

P(X_{_{t}}|X_{0},X_{1},\cdots ,X_{t-1})=P(X_{t}|X_{t-1})

  具有马尔可夫性的随机序列X=({X0,X1,X2,\cdots ,Xt,\cdots })称为马尔可夫链或马尔可夫过程。条件概率分布P(Xt|Xt-1)称为马尔科夫链的转移概率分布。它决定了马尔科夫链的特性

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值