（一） 到达与相通 定义：对给定的两个状态

《应用随机过程教程》教学资源（参考资料）与在算法和智能计算中的应用——第16章 离散状态的Markov控制与决策过程简介

电子科技大学：《随机过程及应用 Stochastic Processes and Applications》课程教学资源（课件讲稿）第6章 马尔科夫过程 第5节 连续参数马尔可夫链

电子科技大学：《随机过程及应用 Stochastic Processes and Applications》课程教学资源（课件讲稿）第6章 马尔科夫过程 第4节 马尔科夫吸收链（马氏吸收链）

《应用随机过程教程》教学资源（参考资料）与在算法和智能计算中的应用——第7章 排队过程

《应用随机过程教程》教学资源（参考资料）与在算法和智能计算中的应用——第6章 连续时间的Markov链（Q-过程）

一、齐次马尔可夫链的概念 一个随机过程{Xn,n=0,1,2,…}就是一族随机变量,而X能 取的各个不同的值,则称为状态。如果一个随机过程{Xn,n=0,1 2,…},由一种状态转移到另一种状态的转移概率只与现在处于什么状 态有关,而与在这时刻之前所处的状态完全无关

随机过程的分类 一、按照概率分布特性分类 二、具有特殊的概率分布 三、按照记忆特性分类 四、按照统计平稳特性分类 五、按照功率谱密度分类 六、按照遍历特性分类

一、概率空间 二、掌握对随机现象的数学建模方法 三、随机对象 四、概念及其描述 五、五种概率函数 六、各种矩描述

第3.1节 随机变量的数字特征 第3.2节 随机向量的数字特征 第3.3节 大数定律与中心极限定理