文档介绍：《随机过程》教程 第16讲离散时间Markov链
东南大学移动通信国家重点实验室
陈明制作
******@seu.
./ing/document/随机过程
11/10/2017
1
东南大学无线电工程系
内容提要
离散时间Markov链的定义
离散时间Markov链的状态分类
11/10/2017
2
东南大学无线电工程系
Markov链的定义
Markov链:状态值可数离散的Markov过程
离散时间Markov链
连续时间Markov链
11/10/2017
3
东南大学无线电工程系
离散时间Markov链
状态概率
状态概率矢量
转移概率
转移概率矩阵
11/10/2017
4
东南大学无线电工程系
C-K方程
11/10/2017
5
东南大学无线电工程系
平稳状态概率的求解
11/10/2017
6
东南大学无线电工程系
状态的互达
定义
等价类
可约
11/10/2017
7
东南大学无线电工程系
常返和瞬过
首达概率的定义
迟早到达概率
常返和瞬过
11/10/2017
8
东南大学无线电工程系
状态空间的分解
11/10/2017
9
东南大学无线电工程系
状态空间分解定理
11/10/2017
10
东南大学无线电工程系