第16讲 离散时间Markov链.ppt

文档介绍：《随机过程》教程第16讲离散时间Markov链
11/11/2017
1
东南大学无线电工程系
内容提要
离散时间Markov链的定义
离散时间Markov链的状态分类
11/11/2017
2
东南大学无线电工程系
Markov链的定义
Markov链:状态值可数离散的Markov过程
离散时间Markov链
连续时间Markov链
11/11/2017
3
东南大学无线电工程系
离散时间Markov链
状态概率
状态概率矢量
转移概率
转移概率矩阵
11/11/2017
4
东南大学无线电工程系
C-K方程
11/11/2017
5
东南大学无线电工程系
平稳状态概率的求解
11/11/2017
6
东南大学无线电工程系
状态的互达
定义
等价类
可约
11/11/2017
7
东南大学无线电工程系
常返和瞬过
首达概率的定义
迟早到达概率
常返和瞬过
11/11/2017
8
东南大学无线电工程系
状态空间的分解
11/11/2017
9
东南大学无线电工程系
状态空间分解定理
11/11/2017
10
东南大学无线电工程系