第一节 马尔可夫链的定义及其性质 第二节 马尔可夫链的状态分类 第三节 平稳分布与遍历性 第四节 时间连续的马尔可夫链

《概率论》课程教学资源（教案讲义）第六章 马尔可夫链 6.3 马尔可夫链及转移概率 6.4 平稳分布

本节讨论状态空间E和参数集T都是可列集的马尔科夫链。马尔科夫链的理论系统而深入，在自然科学、工程技术及经济管理各领域有广泛的应用

针对多无人机在协同搜索过程中存在重复搜索、目标静止、搜索效率低的问题，提出基于改进鸽群优化和马尔可夫链的多无人机协同搜索方法.首先，建立类似传感器探测范围的蜂窝状环境模型，降低对搜索区域的重复搜索；其次，建立满足高斯分布的马尔可夫链动态目标运动模型；然后，将柯西扰动引入基本鸽群优化算法的地图和指南针算子，高斯扰动引入地标算子，同时利用模拟退火机制保留次优个体，进而有效缓减基本鸽群优化算法易陷入局部最优的问题.最后，通过仿真实验将本文算法与其他群体智能算法进行比较，结果表明新型算法的合理性和有效性

一、齐次马尔可夫链的概念 一个随机过程{Xn,n=0,1,2,…}就是一族随机变量,而X能 取的各个不同的值,则称为状态。如果一个随机过程{Xn,n=0,1 2,…},由一种状态转移到另一种状态的转移概率只与现在处于什么状 态有关,而与在这时刻之前所处的状态完全无关

电子科技大学：《随机过程及应用 Stochastic Processes and Applications》课程教学资源（课件讲稿）第6章 马尔科夫过程 第5节 连续参数马尔可夫链

人工智能基础：双层隐马尔可夫链的突发流合成

《概率论》课程教学资源（教案讲义）第六章 马尔可夫链 6.4 条件概率与乘法公式 6.5 全概公式与逆概公式 6.6 独立性

1 健康与疾病 2 钢琴销售的存贮策略 3 基因遗传 4 等级结构

《工程科学学报》：基于改进鸽群优化和马尔可夫链的多无人机协同搜索方法