《随机过程》教程 第16讲离散时间 Markov能 东南大学移动通信国家重点实验室 陈明制作 chenming u. edu. cn ftp. seu.edu. cn/ Incoming/ document/随机过程 2021/2/22 东南大学无线电工程系
2021/2/22 东南大学无线电工程系 1 《随机过程》教程 第16讲 离散时间Markov链 东南大学移动通信国家重点实验室 陈 明 制作 chenming@seu.edu.cn ftp.seu.edu.cn/incoming/document/随机过程
内容提要 离散时间 Markov链的定义 ■离散时间 Markov链的状态分类 2021/2/22 东南大学无线电工程系 2
2021/2/22 东南大学无线电工程系 2 内容提要 ◼ 离散时间Markov链的定义 ◼ 离散时间Markov链的状态分类
Markov链的定义 ■ Markov链:状态值可数离散的 Markov过程 离散时间 Markov链 连续时间 Markov链 2021/2/22 东南大学无线电工程系 3
2021/2/22 东南大学无线电工程系 3 Markov链的定义 ◼ Markov链:状态值可数离散的Markov过程 ◼ 离散时间Markov链 ◼ 连续时间Markov链
离散时间 Markov链 ■状态概率 状态概率矢量 转移概率 ■转移概率矩阵 2021/2/22 东南大学无线电工程系 4
2021/2/22 东南大学无线电工程系 4 离散时间Markov链 ◼ 状态概率 ◼ 状态概率矢量 ◼ 转移概率 ◼ 转移概率矩阵
C-K方程mm,m)=n(m,)n(G,m) 第m步状态第r步状态 第n步状态 T T iM 丌NJ 丌i;(m,m)=∑丌k(m,T)丌k;(r,n) 2021/2/22 东南大学无线电工程系
2021/2/22 东南大学无线电工程系 5 C-K方程
常返和瞬过 首达概率的定义 迟早到达概率 ■常返和瞬过 2021/2/22 东南大学无线电工程系 8
2021/2/22 东南大学无线电工程系 8 常返和瞬过 ◼ 首达概率的定义 ◼ 迟早到达概率 ◼ 常返和瞬过