本文介绍了Markov链的概念，包括其Markov性质、时齐Markov链的定义，以及状态分类如互通性、周期性和常返状态。还探讨了转移概率、C-K方程和状态的平均返回时间。
title: 应用随机过程笔记（三）：Markov链
date: 2020-01-20 20:09:39
tags:
- 应用随机过程
- 数学
categories: - 数学
mathjax: true
Markov性
直观的说，Markov性的意思就是，未来事件的状态至于当前状态有关，与过去状态无关。
更一般的定义：
∀ k ≥ 1 , ∀ n 0 < n 1 < … < n k + 1 , ∀ i 0 , i 1 , … i k − 1 , i , j \forall k \geq 1, \forall n_{0} < n_{1} < \ldots < n_{k+1}, \forall i_{0}, i_{1}, \ldots i_{k-1}, i, j ∀k≥1,∀n0<n1<…<nk+1,∀i0,i
最低0.47元/天 解锁文章
1091
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
