2012-3-21 东南大学无线电工程系 1
,随机过程, 教程
第 17讲 连续时间 Markov链
东南大学移动通信国家重点实验室
陈 明 制作
chenming@seu.edu.cn
ftp.seu.edu.cn/incoming/document/随机过程
2012-3-21 东南大学无线电工程系 2
内容提要
? 状态停留时间
? 状态微分方程
? 生灭过程
? 暂态解
? 稳态解
? 状态转移图
? 有限状态的生灭过程
? 嵌入 Markov链
2012-3-21 东南大学无线电工程系 3
基本概念
? 状态概率
? 状态概率矢量
? 状态转移概率
? 状态转移矩阵
2012-3-21 东南大学无线电工程系 4
状态停留时间
2012-3-21 东南大学无线电工程系 5
状态微分方程
2012-3-21 东南大学无线电工程系 6
生灭过程的定义
2012-3-21 东南大学无线电工程系 7
生灭过程的状态方程
2012-3-21 东南大学无线电工程系 8
稳态解
? 通过暂态解得到
? 通过稳态方程得到
? 稳态解存在的条件
2012-3-21 东南大学无线电工程系 9
稳态解的状态转移图
2012-3-21 东南大学无线电工程系 10
有限状态的生灭过程
2012-3-21 东南大学无线电工程系 11
嵌入 Markov链的概念
2012-3-21 东南大学无线电工程系 12
作业
? 6.15
? 6.19
2012-3-21 东南大学无线电工程系 13
,随机过程,
第 17讲,连续时间 Markov链”终。
,随机过程, 教程
第 17讲 连续时间 Markov链
东南大学移动通信国家重点实验室
陈 明 制作
chenming@seu.edu.cn
ftp.seu.edu.cn/incoming/document/随机过程
2012-3-21 东南大学无线电工程系 2
内容提要
? 状态停留时间
? 状态微分方程
? 生灭过程
? 暂态解
? 稳态解
? 状态转移图
? 有限状态的生灭过程
? 嵌入 Markov链
2012-3-21 东南大学无线电工程系 3
基本概念
? 状态概率
? 状态概率矢量
? 状态转移概率
? 状态转移矩阵
2012-3-21 东南大学无线电工程系 4
状态停留时间
2012-3-21 东南大学无线电工程系 5
状态微分方程
2012-3-21 东南大学无线电工程系 6
生灭过程的定义
2012-3-21 东南大学无线电工程系 7
生灭过程的状态方程
2012-3-21 东南大学无线电工程系 8
稳态解
? 通过暂态解得到
? 通过稳态方程得到
? 稳态解存在的条件
2012-3-21 东南大学无线电工程系 9
稳态解的状态转移图
2012-3-21 东南大学无线电工程系 10
有限状态的生灭过程
2012-3-21 东南大学无线电工程系 11
嵌入 Markov链的概念
2012-3-21 东南大学无线电工程系 12
作业
? 6.15
? 6.19
2012-3-21 东南大学无线电工程系 13
,随机过程,
第 17讲,连续时间 Markov链”终。