马尔科夫性质

        马尔可夫性质概率论中的一个概念。

    当一个随机过程在给定现在状态及所有过去状态情况下,其未来状态的条件概率分布仅依赖于当前状态;换句话说,在给定现在状态时,它与过去状态(即该过程的历史路径)是条件独立的,那么此随机过程即具有马尔可夫性质。具有马尔可夫性质的过程通常称之为马尔可夫过程

    数学上,如果X(t), t>0为一个随机过程,则马尔可夫性质就是指

  • \mathrm{Pr}\big[X(t+h) = y \,|\, X(s) = x(s), s \leq t\big] = \mathrm{Pr}\big[X(t+h) = y \,|\, X(t) = x(t)\big], \quad \forall h > 0.

    马尔可夫过程通常称其为(时间)齐次,如果满足

  • \mathrm{Pr}\big[X(t+h) = y \,|\, X(t) = x(t)\big] = \mathrm{Pr}\big[X(h) = y \,|\, X(0) = x(0)\big], \quad \forall t, h > 0,

除此之外则被称为是(时间)非齐次的。齐次马尔可夫过程通常比非齐次的简单,构成了最重要的一类马尔可夫过程。

    某些情况下,明显的非马尔可夫过程也可以通过扩展“现在”和“未来”状态的概念来构造一个马尔可夫表示。设X为一个非马尔可夫过程。我们就可以定义一个新的过程Y,使得每一个Y的状态表示X的一个时间区间上的状态,用数学方法来表示,即,

  • Y(t) = \big\{ X(s) : s \in [a(t), b(t)] \, \big\}.

    如果Y具有马尔可夫性质,则它就是X的一个马尔可夫表示。 在这个情况下,X也可以被称为是二阶马尔可夫过程更高阶马尔可夫过程也可类似地来定义。【1】

    

    一言以蔽之,当前情况尽跟之前n个状态有关的随机过程称为n阶马尔科夫过程。





【1】维基百科:http://zh.wikipedia.org/wiki/%E9%A9%AC%E5%B0%94%E5%8F%AF%E5%A4%AB%E6%80%A7%E8%B4%A8

    

转载于:https://my.oschina.net/xueyang/blog/387206

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值